↑↑↑关注后"星标"Datawhale

每日干货 & 每月组队学习,不错过

Datawhale干货

作者:唐杰教授,来源:人工智能AI技术

编辑:AI数据派‍‍‍‍‍‍‍‍‍‍

本文约1850字44图,建议阅读9分钟。

本文从人工智能发展的历史开始,深入分析人工智能近十年的发展,阐述了人工智能在感知方面取得的重要成果。

唐杰教授从人工智能发展的历史开始,深入分析人工智能近十年的发展,阐述了人工智能在感知方面取得的重要成果,尤其提到算法是这个感知时代最重要、最具代表性的内容。

重点讲解了 BERT、ALBERT、MoCo2 等取得快速进展的算法。最后说到下一波人工智能浪潮的兴起,就是实现具有推理、可解释性、认知的人工智能。

人工智能对社会和经济影响的日益凸显,各国政府也先后出台了对人工智能发展的政策,并将其上升到国家战略的高度。截至目前,包括美国、中国和欧盟在内的多国和地区颁布了国家层面的人工智能发展政策。

在这个时代背景下,我们需要考虑人工智能未来十年会怎样发展。首先,我们需要从人工智能的发展历史中找到灵感。

我们再深入分析 AI 近十年的发展,会看到一个重要的标志:人工智能在感知方面取得重要成果。人工智能在语音识别、文本识别、视频识别等方面已经超越了人类,我们可以说 AI 在感知方面已经逐渐接近人类的水平。从未来的趋势来看,人工智能将会有一个从感知到认知逐步发展的基本趋势,如下图所示:

首先,我们来看看 AI 在感知方面做了哪些事情。在感知方面,AlphaGo、无人驾驶、文本和图片之间的跨媒体计算等取得了快速发展。从宏观来看,算法是这个感知时代最重要、最具代表性的内容。如果把最近十年的重要算法进行归类,以深度学习为例进行展示的话,我们可以得到下图所示的发展脉络。

这里,我想引用张钹院士提出来的第三代人工智能的理论体系。

2015 年,张钹院士提出第三代人工智能体系的雏形。

2017 年,DARPA 发起 XAI 项目,核心思想是从可解释的机器学习系统、人机交互技术以及可解释的心理学理论三个方面,全面开展可解释性 AI 系统的研究。

2018 年底,正式公开提出第三代人工智能的理论框架体系,核心思想为:

建立可解释、鲁棒性的人工智能理论和方法。发展安全、可靠、可信及可扩展的人工智能技术。推动人工智能创新应用。其中具体实施的路线图如下:

与脑科学融合,发展脑启发的人工智能理论。数据与知识融合的人工智能理论与方法。在这个思想框架下,我们做了一定的深入研究,我们称之为认知图谱。其核心概念是知识图谱+认知推理+逻辑表达。

当我们用传统算法(如 BIDAF, BERT, XLNet)进行解决的时候,计算机可能只会找到局部的片段,仍然缺乏一个在知识层面上的推理能力,这是计算机很欠缺的。人在这方面具有优势,而计算机缺乏类似的能力。

人在解决上述问题的过程中存在推理路径、推理节点,并且能理解整个过程,而 AI 系统,特别是在当下的 AI 系统中,深度学习算法将大部分这类问题都看作是一个黑盒子,如下图所示:

这个基本的思想是结合认知科学中的双通道理论。在人脑的认知系统中存在两个系统:System 1 和 System 2,如下图所示。System 1 是一个直觉系统,它可以通过人对相关信息的一个直觉匹配寻找答案,它是非常快速、简单的;而 System 2 是一个分析系统,它通过一定的推理、逻辑找到答案。

在去年的 NIPS 上,图灵奖获得者 Bengio 在大会主旨报告的 Keynote 也提到,System 1 到 System 2 的认知是深度学习未来发展的重要的方向,如下图所示:

因此,我们大概用这个思路构建了这个新的、我们称为认知图谱的这样一个方法。在 System 1 中我们主要做知识的扩展,在 System 2 中我们做逻辑推理和决策,如下图所示:

可以看到,我们在 System 1 中做知识的扩展,比如说针对前面的问题,我们首先找到相关的影片,然后用 System 2 来做决策。如果是标准答案,就结束整个推理的过程。如果不是标准答案,而相应的信息又有用,我们就把它作为一个有用信息提供给 System 1,System 1 继续做知识的扩展,System 2 再来做决策,直到最终找到答案。

现在,在这两个系统中,System 1 是一个直觉系统,我们用 BERT 来实现,实现了以后,我们就可以做相关的信息的匹配;System 2 就用一个图卷积网络来实现,在图卷积网络中可以做一定的推理和决策。通过这个思路,我们就可以实现一定的推理+决策。

这是一个总体的思路,要真正实现知识和推理,其实还需要万亿级的常识知识库的支持,如下图所示。也就是说,四五十年前费根鲍姆做过的事情,也许我们现在要重做一遍,但是我们要做到更大规模的常识知识图谱,并且用这样的方法,用这样的常识知识图谱来支撑上面的深度学习的计算,这样才能真正实现未来的 AI。

所以说,这一代人工智能浪潮也许到终点还是没有推理能力,没有可解释能力。而下一波人工智能浪潮的兴起,就是实现具有推理、具有可解释性、具有认知的人工智能,我们认为这是 AI 下一个 10 年要发展、也一定会发展的一个重要方向。

“整理不易,三连

清华大学唐杰教授:人工智能的十年总结相关推荐

  1. 【量子位meet大会】清华大学唐杰教授:《认知图谱》(ppt分享)

    清华大学唐杰教授:认知图谱 [最后一页的reference无法找到,这里放出唐杰教授的publication链接,ppt中定是主页的子集.publication-Jie Tang] [更新:最后一页] ...

  2. AIProCon在线大会笔记之清华大学唐杰教授:人工智能的下一个十年

    AIProCon在线大会笔记 人工智能的下一个十年 AI趋势:从感知到认知 第三代人工智能 认知图谱(Cognitive Graph) 挑战性:可解释性 人工智能的下一个十年 清华大学 计算机科学与技 ...

  3. 清华大学唐杰教授:认知图谱是人工智能的下一个瑰宝(附PPT下载)

    来源:学术头条 本文约6300字,建议阅读10分钟 如何以计算机的方式做认知? 公众号(DatapiTHU)后台回复"20201224"获取完整PPT下载 AI 的下一次机遇在哪里 ...

  4. 清华大学唐杰教授:认知图谱是人工智能的下一个瑰宝 | PPT免费下载

    AI 的下一次机遇在哪里? 自 1956 年 AI 的概念首次被提出,至今已有 60 多年的发展史.如今,随着相关理论和技术的不断革新,AI 在数据.算力和算法"三要素"的支撑下越 ...

  5. 清华计算机系唐杰,清华大学—唐杰:图神经网络(GNN)及认知推理

    讲座主题:图神经网络(GNN)及认知推理 讲座时间:2019年10月11日下午13:30--14:30 讲座地点:信息管理学院918会议室 主讲人:唐杰教授 主讲人简介:唐杰,清华大学计算机系教授.系 ...

  6. 热烈祝贺AI TIME发起人唐杰教授当选IEEE Fellow!

    ⬆⬆⬆              点击蓝字 关注我们 AI TIME欢迎每一位AI爱好者的加入! 11 月 25 日,全球最大的非盈利专业技术协会IEEE (国际电气与电子工程师协会)揭晓2021年新 ...

  7. 清华大学 唐杰 计算机学院 怎么样,我国首位原创虚拟学生,后期希望“她”能够像人一样进行创新...

    清华大学计算机专业知识工程实验室正式的公开了在我国第一个原创虚拟学生-华智冰.6月15日,清华大学计算机专业举办"华智冰"工作成果见面会,身为在我国第一位原创虚拟学生,华智冰将入学 ...

  8. AI开发者大会:2020年7月3日09:50--10:10唐杰《人工智能的下一个十年》

    AI开发者大会:2020年7月3日09:50--10:10唐杰<人工智能的下一个十年> 导读:人工智能的第三次浪潮中,超越深度学习-ML和DL需要结合符号AI:自监督学习将会大放异彩. N ...

  9. AI:2020年6月24日北京智源大会演讲分享之知识智能专题论坛——11:30-12:00唐杰 教授《CogDL:An Extensive Research Toolkit for Deep Le》

    AI:2020年6月24日北京智源大会演讲分享之知识智能专题论坛--11:30-12:00唐杰 教授< CogDL:An Extensive Research Toolkit for Deep  ...

最新文章

  1. python游戏中调整箭头下落速度_入门 | 三行Python代码,让数据预处理速度提高2到6倍...
  2. python 装饰器实现缓存_Python, 这一个缓存装饰器, 其执行流程是怎样的?
  3. micropython lcd触摸屏显示中文_基于Micropython的天气显示 进程帖
  4. 19年兰州大学计算机分数线,兰州大学2019年在广东省录取分数线
  5. php strlen遇0截断,聊下php下的截断问题
  6. 坚果手机产品经理朱海舟:售后服务和系统维护会正常继续
  7. 石墨烯在生物医学上应用的研究进展_石墨烯在润滑油中的应用
  8. Excel设置数据有效性实现单元格下拉菜单的3种方法
  9. 语法长难句——并列句
  10. Tracup小提示:工作总是摸鱼、走神,您可能得了“成人多动症”?
  11. Tcp Daytime获取客户端
  12. html前端使用高德地图入门教程,并在地图上标记位置
  13. 【无监督】自编码器(Autoencoder)
  14. cuda10.1安装
  15. 2022年 微前端技术调研- 图文并茂
  16. 网络安全学习笔记——红队实战攻防(中)
  17. Qt操作excel基本方法
  18. 数据分析有哪些好书值得推荐?
  19. 《剑指offer》第二章——关于面试官王海波的思考
  20. 关于幅角原理的理解和Nyquist稳定性判据

热门文章

  1. 【洛谷 1345】 奶牛的电信
  2. 架构设计之分布式文件系统
  3. tomcat5.5.9+sql2000数据库连接池配置
  4. 【组队学习】【29期】5. 李宏毅机器学习(含深度学习)
  5. Numpy入门教程:06. 排序,搜索和计数
  6. 刻意练习:LeetCode实战 -- 不同的二叉搜索树
  7. 【MATLAB】数据分析之多项式及其函数
  8. 又一年5.20,用Python助力程序员脱单大攻略(视频版)
  9. 为什么校招面试中总被问“线程与进程的区别”?我该如何回答?
  10. XGBoost缺失值引发的问题及其深度分析 | CSDN博文精选