人工智能、机器学习与深度学习关系

人工智能、机器学习与深度学习

人工智能

人工智能是一门新兴学科，关于人工智能的定义，有很多人给出过，比如

• 约翰·麦卡锡(2007)：It is the science and engineering of making intelligent machines, especially intelligent computer programs. It is related to the similar task of using computers to understand human intelligence, but AI does not have to confine itself to methods that are biologically observable.

• Andreas Kaplan：A system’s ability to correctly interpret external data, to learn from such data, and to use those learnings to achieve specific goals and tasks through flexible adaptation.

• 全国信息安全标准化技术委员会：人工智能，是利用数字计算机或者数字计算机控制的机器模拟、延伸 和扩展人的智能，感知环境、获取知识并使用知识获得最佳结果的理 论、方法、技术及应用系统。

人工智能可以分成以下三类：

• 强人工智能：认为有可能制造出真正能推理和解决问题的智能机器，这样的机器被认为是有自主意识的
• 弱人工智能：认为不可能制造出能真正进行推理和解决问题的智能 机器，这些机器只不过看起来像是智能的，但是并不真正拥有智能， 也不会有自主意识
• 超级人工智能：机器的智能彻底超过了人类，“奇点”2050年到来？

人工智能的三次浪潮

机器学习

机器学习定义 让计算机具有像人一样的学习和思考能力的技术的总称。具体来说是从已知数据中获得规律，并利用规律对未知数据进行预测的技术

机器学习分类

• 有监督学习(SupervisedLearning)：有老师(环境)的情况下， 学生(计算机)从老师(环境)那里获得对错指示、最终答案的学

  习方法。跟学师评

• 无监督学习(UnsupervisedLearning)：没有老师(环境)的情

  况下，学生(计算机)自学的过程，一般使用一些既定标准进行评价。自学标评

• 强化学习(ReinforcementLearning)：没有老师(环境)的情况 下，学生(计算机)对问题答案进行自我评价的方法。自学自评

起源与发展

• 第一阶段(1943 -1969)

  • 1943年：Warren McCulloch和Walter Pitts提出了MP神经元模型
  • 1958年：Frank Rosenblatt提出了感知器(Perceptron)
  • 1960年：Bernard Widrow和Ted Hoff提出了ADLINE神经网络
  • 1969年：Marvin Minsky和Seymour Papert指出感知器只能做简单的线性分类任务，无法解决XOR这种简单分类问题

• 第二阶段(1980 -1989)

  • 1982年：John Hopfield提出了Hopfield神经网络
  • 1986年：David Rumelhart、Geoffrey Hinton和Ronald Williams提 出了误差反向传播算法(Error Back Propagation, BP)
  • 1989年:YannLeCun等人提出了卷积神经网络(Convolutional Neural Networks，CNN)

• 第三阶段(2006 - )

  • 2006年:Hinton和他的学生正式提出了深度学习的概念，通过无监督学习方法逐层训练算法，再使用有监督的反向传播算法进行调优

  • 2011年:Frank Seide在语音识别基准测试数据集上获得压倒性优势

  • 2012年:AlexKrizhevsky在CNN中引入ReLU激活函数，在图像识别基准测试中获得压倒性优势。

  • 2012年：吴恩达(Andrew Ng)教授和谷歌首席架构师Jeff Dean共 同主导著名的GoogleBrain项目，采用16万个CPU来构建一个深层 神经网络——DNN，将其应用于图像和语音的识别，大获成功

  • 2014年：Facebook的DeepFace项目，在人脸识别方面的准确率已 经能够达到97%以上，跟人类识别的准确率几乎没有差别

  • 2016年：谷歌DeepMind开发的AlphaGo以4:1的比分战胜国际顶尖 围棋高手李世石，证明在围棋领域，基于深度学习技术的机器人已

    经超越了人类