当前位置:首页 >> 计算机硬件及网络 >> 简单读懂人工智能:机器学习与深度学习是什么关系

简单读懂人工智能:机器学习与深度学习是什么关系


简单读懂人工智能: 机器学习与深度学习是什 么关系
本文章来自于阿里云云栖社区

摘要: 引言:随着 AlphaGo 战胜李世石,人工智能和深度学习这些概念已经成 为一个非常火的话题。 人工智能、机器学习与深度学习这几个关键词时常出现在 媒体新闻中,并错误地被认为是等同的概念。本文将介绍人工智能、机器学习以 及深度学习的概念,并着重解析它们之间的关系。 引言:随着 AlphaGo 战胜李世石,人工智能和深度学习这些概念已经成为一个 非常火的话题。 人工智能、 机器学习与深度学习这几个关键词时常出现在媒体新 闻中,并错误地被认为是等同的概念。本文将介绍人工智能、机器学习以及深度 学习的概念, 并着重解析它们之间的关系。本文将从不同领域需要解决的问题入 手,依次介绍这些领域的基本概念以及解决领域内问题的主要思路。 本文选自《Tensorflow:实战 Google 深度学习框架》。 从计算机发明之初,人们就希望它能够帮助甚至代替人类完成重复性劳作。 利用巨大的存储空间和超高的运算速度, 计算机已经可以非常轻易地完成一些对 于人类非常困难,但对计算机相对简单的问题。比如,统计一本书中不同单词出 现的次数,存储一个图书馆中所有的藏书,或是计算非常复杂的数学公式,都可 以轻松通过计算机解决。然而,一些人类通过直觉可以很快解决的问题,目前却 很难通过计算机解决。 这些问题包括自然语言理解、 图像识别、 语音识别, 等等。 而它们就是人工智能需要解决的问题。 计算机要像人类一样完成更多智能的工作, 需要掌握关于这个世界海量的知 识。比如要实现汽车自动驾驶,计算机至少需要能够判断哪里是路,哪里是障碍 物。这个对人类非常直观的东西,但对计算机却是相当困难的。路有水泥的、沥 青的,也有石子的甚至土路。这些不同材质铺成的路在计算机看来差距非常大。 如何让计算机掌握这些人类看起来非常直观的常识, 对于人工智能的发展是一个

巨大的挑战。 很多早期的人工智能系统只能成功应用于相对特定的环境 (specific domain),在这些特定环境下,计算机需要了解的知识很容易被严格并且完整 地定义。例如,IBM 的深蓝(Deep Blue)在 1997 年打败了国际象棋冠军卡斯 帕罗夫。 设计出下象棋软件是人工智能史上的重大成就,但其主要挑战不在于让 计算机掌握国际象棋中的规则。国际象棋是一个特定的环境,在这个环境中,计 算机只需要了解每一个棋子规定的行动范围和行动方法即可。虽然计算机早在 1997 年就可以击败国际象棋的世界冠军, 但是直到 20 年后的今天, 让计算机实 现大部分成年人都可以完成的汽车驾驶却仍然依旧十分困难。 为了使计算机更多地掌握开放环境(open domain)下的知识,研究人员进 行了很多尝试。 其中一个影响力非常大的领域是知识图库 (Ontology) 。 WordNet 是在开放环境中建立的一个较大且有影响力的知识图库。WordNet 是由普林斯 顿大学(Princeton University)的 George Armitage Miller 教授和 Christiane Fellbaum 教授带领开发的,它将 155287 个单词整理为了 117659 个近义词集 (synsets) 。 基于这些近义词集, WordNet 进一步定义了近义词集之间的关系。 比如同义词集“狗”属于同义词集“犬科动物”,他们之间存在种属关系 (hypernyms/hyponyms) 。 除了 WordNet, 也有不少研究人员尝试将 Wikipedia 中的知识整理成知识图库。谷歌的知识图库就是基于 Wikipedia 创建的。 虽然使用知识图库可以让计算机很好地掌握人工定义的知识, 但建立知识图 库一方面需要花费大量的人力物力, 另一方面可以通过知识图库方式明确定义的 知识有限, 不是所有的知识都可以明确地定义成计算机可以理解的固定格式。很 大一部分无法明确定义的知识, 就是人类的经验。比如我们需要判断一封邮件是 否为垃圾邮件,会综合考虑邮件发出的地址、邮件的标题、邮件的内容以及邮件 收件人的长度,等等。这是收到无数垃圾邮件骚扰之后总结出来的经验。这个经 验很难以固定的方式表达出来, 而且不同人对垃圾邮件的判断也会不一样。如何 让计算机可以跟人类一样从历史的经验中获取新的知识呢?这就是机器学习需 要解决的问题。 卡内基梅隆大学(Carnegie Mellon University)的 Tom Michael Mitchell 教 授在 1997 年出版的书籍 Machine Learning 中对机器学习进行过非常专业的定 义,这个定义在学术界内被多次引用。在这本书中对机器学习的定义为“如果一

个程序可以在任务 T 上,随着经验 E 的增加,效果 P 也可以随之增加,则称这 个程序可以从经验中学习”。通过垃圾邮件分类的问题来解释机器学习的定义。 在垃圾邮件分类问题中,“一个程序”指的是需要用到的机器学习算法,比如逻辑 回归算法;“任务 T”是指区分垃圾邮件的任务;“经验 E”为已经区分过是否为垃 圾邮件的历史邮件,在监督式机器学习问题中,这也被称之为训练数据;“效果 P”为机器学习算法在区分是否为垃圾邮件任务上的正确率。 在使用逻辑回归算法解决垃圾邮件分类问题时, 会先从每一封邮件中抽取对 分类结果可能有影响的因素, 比如说上文提到的发邮件的地址、邮件的标题及收 件人的长度,等等。每一个因素被称之为一个特征(feature)。逻辑回归算法 可以从训练数据中计算出每个特征和预测结果的相关度。 比如在垃圾邮件分类问 题中, 可能会发现如果一个邮件的收件人越多,那么邮件为垃圾邮件的概率也就 越高。 在对一封未知的邮件做判断时,逻辑回归算法会根据从这封邮件中抽取得 到的每一个特征以及这些特征和垃圾邮件的相关度来判断这封邮件是否为垃圾 邮件。 在大部分情况下, 在训练数据达到一定数量之前,越多的训练数据可以使逻 辑回归算法对未知邮件做出的判断越精准。 也就是说逻辑回归算法可以根据训练 数据(经验 E)提高在垃圾邮件分类问题(任务 T)上的正确率(效果 P)。之 所以说在大部分情况下, 是因为逻辑回归算法的效果除了依赖于训练数据,也依 赖于从数据中提取的特征。 假设从邮件中抽取的特征只有邮件发送的时间,那么 即使有再多的训练数据, 逻辑回归算法也无法很好地利用。这是因为邮件发送的 时间和邮件是否为垃圾邮件之间的关联不大, 而逻辑回归算法无法从数据中习得 更好的特征表达。这也是很多传统机器学习算法的一个共同的问题。 类似从邮件中提取特征, 如何数字化地表达现实世界中的实体,一直是计算 机科学中一个非常重要问题。如果将图书馆中的图书名称储存为结构化的数据, 比如储存在 Excel 表格中, 那么可以非常容易地通过书名查询一本书是否在图书 馆中。 如果图书的书名都是存在非结构化的图片中,那么要完成书名查找任务的 难度将大大增加。类似的道理,如何从实体中提取特征,对于很多传统机器学习 算法的性能有巨大影响。我们看一个简单的例子。

不同的数据表达对使用直线划分不同颜色 结点的难度影响 如果通过笛卡尔坐标系(cartesian coordinates)来表示数据,那么不同颜色的 结点无法被一条直线划分。 如果将这些点映射到极角坐标系 (polar coordinates) , 那么使用直线划分就很容易了。 同样的数据使用不同的表达方式会极大地影响解 决问题的难度。 一旦解决了数据表达和特征提取,很多人工智能任务也就解决了 90%。 然而,对许多机器学习问题来说,特征提取不是一件简单的事情。在一些复 杂问题上,要通过人工的方式设计有效的特征集合,需要很多的时间和精力,有 时甚至需要整个领域数十年的研究投入。例如,假设想从很多照片中识别汽车。 现在已知的是汽车有轮子,所以希望在图片中抽取“图片中是否出现了轮子”这个 特征。但实际上,要从图片的像素中描述一个轮子的模式是非常难的。虽然车轮 的形状很简单,但在实际图片中,车轮上可能会有来自车身的阴影、金属车轴的 反光, 周围物品也可能会部分遮挡车轮。实际图片中各种不确定的因素让我们很 难直接抽取这样的特征。 既然人工的方式无法很好地抽取实体中的特征, 那么是否有自动的方式呢?

答案是肯定的。 深度学习解决的核心问题之一就是自动地将简单的特征组合成更 加复杂的特征, 并使用这些组合特征解决问题。 深度学习是机器学习的一个分支, 它除了可以学习特征和任务之间的关联以外, 还能自动从简单特征中提取更加复 杂的特征。下图展示了深度学习和传统机器学习在流程上的差异。

传统机器学习和深度学习流程 对比

如图所示, 深度学习算法可以从数据中学习更加复杂的特征表达,使得最后 一步权重学习变得更加简单且有效。

深度学习在图像分类问题上的算法流程样例

在上图中, 展示了通过深度学习解决图像分类问题的具体样例。深度学习可 以一层一层地将简单特征逐步转化成更加复杂的特征, 从而使得不同类别的图像 更加可分。 比如图中展示了深度学习算法可以从图像的像素特征中逐渐组合出线 条、边、角、简单形状、复杂形状等更加有效的复杂特征。 早期的深度学习受到了神经科学的启发,它们之间有非常密切的联系。科学 家们在神经科学上的发现使得我们相信深度学习可以胜任很多人工智能的任务。 神经科学家发现, 如果将小白鼠的视觉神经连接到听觉中枢,一段时间之后小鼠 可以习得使用听觉中枢“看”世界。这说明虽然哺乳动物大脑分为了很多区域,但 这些区域的学习机制却是相似的。在这一假想得到验证之前,机器学习的研究者 们通常会为不同的任务设计不同的算法。而且直到今天,学术机构的机器学习领 域也被分为了自然语言处理、 计算机视觉和语音识别等不同的实验室。因为深度 学习的通用性, 深度学习的研究者往往可以跨越多个研究方向甚至同时活跃于所 有的研究方向。 虽然深度学习领域的研究人员相比其他机器学习领域更多地受到了大脑工 作原理的启发,而且媒体界也经常强调深度学习算法和大脑工作原理的相似性, 但现代深度学习的发展并不拘泥于模拟人脑神经元和人脑的工作机理。 模拟人类 大脑也不再是深度学习研究的主导方向。 我们不应该认为深度学习是在试图模仿 人类大脑。 目前科学家对人类大脑学习机制的理解还不足以为当下的深度学习模 型提供指导。 现代的深度学习已经超越了神经科学观点, 它可以更广泛地适用于各种并不 是由神经网络启发而来的机器学习框架。值得注意的是,有一个领域的研究者试 图从算法层理解大脑的工作机制,它不同于深度学习的领域,被称为“计算神经 学”(computational neuroscience)。深度学习领域主要关注如何搭建智能的计 算机系统, 解决人工智能中遇到的问题。计算神经学则主要关注如何建立更准确 的模型来模拟人类大脑的工作。 总的来说,人工智能、机器学习和深度学习是非常相关的几个领域。下图总结了 它们之间的关系。

人工智能、机器学习以及深度学习之间的关系图

人工智能是一类非常广泛的问题, 机器学习是解决这类问题的一个重要手段。 深度学习则是机器学习的一个分支。在很多人工智能问题上,深度学习的方法突 破了传统机器学习方法的瓶颈,推动了人工智能领域的发展。 本节部分内容参见: Goodfellow I, Bengio Y, Courville A. Deep learning [M]. The MIT Press,2016. Mitchell T M, Carbonell J G, Michalski R S. Machine Learning [M]. McGraw-Hill, 2003. 本文选自《Tensorflow:实战 Google 深度学习框架》,点此链接可在博文 视点官网查看此书(原文链接: http://www.broadview.com.cn/book/111?spm=5176.100239.blogcont72473.11 .qf9AyO)


更多相关文档:

简单读懂人工智能:机器学习与深度学习是什么关系.doc

简单读懂人工智能:机器学习与深度学习是什么关系 - 简单读懂人工智能: 机器学习与深度学习是什 么关系 本文章来自于阿里云云栖社区 摘要: 引言:随着 ...

人工智能、机器学习、深度学习三者之间的同心圆关系_图文.doc

人工智能、机器学习、深度学习三者 之间的同心圆关系 当谷歌 DeepMind 团队的 AlphaGo 打败了李世石时,媒体就用人工智能机器学习和深 度学习这三个术语来描述 ...

人工智能、机器学习和深度学习的区别和联系_光环大数据....pdf

人工智能机器学习和深度学习的区别和联系_光环大数据培训_计算机硬件及...我们就用最简单的方法同心圆,可视化地展现出它们三者的关系。 光环大...

人工智能、机器学习、深度学习三者之间的同心圆关系_图文.doc

人工智能、机器学习、深度学习三者 之间的同心圆关系当谷歌 DeepMind 团队的 AlphaGo 打败了李世石时,媒体就用人工智能机器学习和深 度学习这三个术语来描述 ...

人工智能、机器学习和深度学习的区别_图文.doc

人工智能、机器学习和深度学习的区别 1.基于激光扫描...方法同心圆,可视化地展现出它们三者的关系和应 ...简单读懂人工智能:机器... 7页 免费 深度学习...

几分钟带你了解人工智能和机器学习.doc

人工智能、机器学习、深度学习和强化学习首先来看一下人工智能机器学习和深度学习之间的关系。如图所示,我们可以大致认为深 度学习是机器学习中的一种学习方法,而...

少儿编程:人工智能、机器学习、深度学习的关系.doc

少儿编程:人工智能机器学习深度学习关系人工智能的风刮火了少儿编程, 政策利

人工智能,机器学习和深度学习之间的差异是什么_光环大....pdf

人工智能,机器学习和深度学习之间的差异是什么_光环大数据培训 - 光环大数据--大数据培训&人工智能培训 http://hadoop.aura-el.com 人工智能,机器学习和深度学习...

人工智能、机器学习和深度学习的区别与联系_论文.pdf

人工智能机器学习和深度学习的区别与联系_电子/电路_工程科技_专业资料。医 学

少儿编程:深度解析人工智能,机器学习和深度学习.doc

那么,在 2018 年行程过半的今天,随着少儿编程的持续火热,又带火了少儿编程行业 中的最前沿科技人工智能机器学习和深度学习。那么这三者有何关系呢?今天极客...

少儿编程:深度解析人工智能、机器学习和深度学习.doc

少儿编程:深度解析人工智能机器学习和深度学习 极客晨星 少儿编程 近年来, 被

一文读懂深度学习与机器学习的差异_北京光环大数据人工....pdf

一文读懂深度学习与机器学习的差异_北京光环大数据人工智能培训 - 光环大数据--大数据培训&人工智能培训 http://hadoop.aura-el.com 一文读懂深度学习与机器学习...

机器学习和深度学习的区别_图文.ppt

机器学习和深度学习的区别 - 机器学习与 深度学习的区别 2016是人工智能爆发

人工智能、机器学习、深度学习并不像您想象的那么....doc

给你的建议是: 结合使用开源库、 Nvidia 硬件和 FLIR 相机,充分利用深度学习。...人工智能、机器学习和深... 暂无评价 8页 2下载券 简单读懂人工智能:机器....

隐藏在人工智能下的机器学习与深度学习差异.doc

隐藏在人工智能下的机器学习与深度学习差异 - 导读:人工智能的浪潮席卷全球,人人都在探讨人工智能、机器学习、深度学习,为了更好的让大家理解人工智能下的机器学习与...

少儿编程、人工智能与深度学习的关系.doc

少儿编程、人工智能与深度学习关系 我们的世界正在迅速程序化、数据化和智能化,大数据、物联网、云计算、机器学习人工智能机器智能这样一系列技术,让万物...

【不看后悔】在杭州,对人工智能和机器学习了解有哪些?.doc

人工智能、机器学习、深度学习和强化学习 首先来看一下人工智能机器学习和深度学习之间的关系。如图所示,我们可以大致认为深 度学习是机器学习中的一种学习方法,而...

一文读懂深度学习与机器学习的差异_光环大数据培训.pdf

一文读懂深度学习与机器学习的差异_光环大数据培训 - 光环大数据--大数据培训&人工智能培训 http://hadoop.aura-el.com 一文读懂深度学习与机器学习的差异_光环...

人工智能与深度学习_图文.ppt

(IITRDI) 人工智能与深度学习 王言伟 智能图像技术...90年代~2000年,浅层机器学习模型的兴起 ?2006年,...

AI和大数据+机器学习是什么关系 有什么区别和联系_光环....pdf

光环大数据--大数据培训&人工智能培训 http://hadoop.aura.cn AI 和大数据+机器学习是什么关系 有什么区别联系_光环大数据培训 人工智能(AI)应用程序不是一...

更多相关标签:
网站地图

文档资料共享网 nexoncn.com copyright ©right 2010-2020。
文档资料共享网内容来自网络,如有侵犯请联系客服。email:zhit325@126.com