457,常识推理攻关进展

人工智能要变得像人一样聪明常识推理能力是必备的

机器缺乏常识推理,何时到了破局的时候?!这是迄今为止一直困扰人工智能50多年的难题。

OpenAI于去年发布GPT—2,它是一个具有15亿参数的通用语言模型,该模型生成的句子流畅惊人,几乎可以假乱真,在语言模仿上有较大进展,但它缺乏基本常识。

常识是无法穷尽不成文的规则,是一种广泛可重复使用的背景知识,几乎人人都有,大多数常识知识是隐性的,建立常识库(把现实世界的事实记录下来)以此实现自动化常识推理第一步,但做起来困难之大难以想像。

一般解决常识推理有两条路:符号推理和深度学习。关于符号推理,研究人员尝试将常识翻译成计算机语言—逻辑,期望在常识推理上带来突破,花了不少力气取得极其有限进展。另一条路,研究人员使用神经网络进行深度学习,模拟生物大脑中相互连接的神经元层,在不需要程序员事先指定的情况下学习模式。纯粹以知识为基础的符号推理方法并不真正为常识推理问题带来突破;而基于神经网络的深度学习方法又如何呢?在过去几十年间经过大量数据训练的越来越复杂的神经网络,已经变革了计算机视觉和自然语言处理领域的研究,然而虽然神经网络具有较强的智能能力以及灵活性,但这些系统仍会犯很多常识性错误。

艾伦人工智能研究所研究员、华盛顿大学计算科学家叶锦才(YejinChoi)及其同事提出了自动知识图谱构建模型COMET(CommonsenseTransformers),融合了G0FAI式的符号推理和深度学习两种人工智能方法。COMET在处理超出其内置常识以外(即覆盖性)有不错表现,在解决脆弱性问题上也可圈可点。但深度学习有一个根本性限制:统计不等于理解。

要想让计算机建立真正的常识,需要利用语言本身以外的媒介,如视觉感知或具象感觉。另外还要挖掘神经语言模型的潜力。

补充一点:计算机同样也需要常识,一般而言,没有常识计算机就无法完全理解自然语言,也无法进行视觉和规划任务。

458,浪潮连续三年领跑中国AI服务器市场

近日国际调研分析公司IDC公布了《2019年中国AI基础架构市场调查报告》:

2019年中国AI服务器市场规模23.3亿美元(全球市场规模99亿美国,中国市场占全球市场的23.5%)同比增长57.9%(2倍于全球市场增速)。

其中浪潮保持强势领跑,连续三年(2017~2019)市场份额均超过50%,稳居第一。

中国AI服务器市场各企业所占份额:

  • 浪潮50.80%
  • 华为18.40%
  • 曙光4.90%
  • 新华三3.6%
  • 戴尔3.2%
  • 联想3.1%

459,四足机器狗巡逻公园

新加坡公园部署机器狗巡逻,提醒人们保持社交距离。这是由美国波士顿动力公司制造的STOP遥控机器人。

460,深度学习神通广大!

深度学习是当前人工智能领域最重要、也是被业界公认最有效的一种算法。

同门兄弟:机器学习、深度学习、强化学习、……

专长应用领域:语音识别、图像识别、围棋比赛、自然语言处理、自动驾驶

(AlphaGo背后的核心技术是深度强化学习)

关键应用领域:六代(战斗)机、全新抗生素(解决原有抗生素耐药性问题)、天气预报、医疗诊断、基因科学、抗疫黑科技、安全防假

广泛应用领域:物理、化学、机械、能源、医疗、材料等传统行业的创新亊业

采用AutoML、AIExplorables等新出现的工具,可降低深度学习技术门槛,便于深度学习推广应用

硬件领域:基于深度学习开发的芯片统称AI芯片(与神经拟态芯片相区别),各种专用AI芯片的涌现,为深度学习大规模应用提供了算力支持。

与各种技术互动:物联网、量子计算、区块链、5G等相关技术的发展,也为深度学习在产业的渗透提供了诸多便利。

打破黑盒子:将深度神经网络置于自监督学习(训练)之下,可改变深度学习黑盒子操作的缺陷,变不可理解、不可解释为可,从而打破天花板,提升深度学习功效。

461,深度神经网络降噪取得重大突破

清微智能受邀参加国际语音旗舰会议并讲演

近日,由清华大学和清微智能技术团队合作的论文:《PAGAN-一种用于语音增强的自适应生成对抗网络》。

语音降噪是常见的语音应用,电子设备降噪问题已经成为一种刚需。但由于噪声的产生是隨机的,产生原因和特性也相当复杂,因此只有适宜的语音增强技术才能达到较理想的降噪效果。

该论文研发一种用于语音增强的自适应生成对抗网络,对降噪问题中频域处理过程中导致相位不匹配的问题,提出一种用对抗网络的方法,生成网络使用频谱信息,对抗网络使用时域信息,以得到更好的频域降噪中的相位匹配。

研发降噪的背景是深度神经网络(DNN),它在语音增强方面效果明显。

深度神经网络凭借强大的数据驱动、计算模型的不断更新迭代,且能够适应不同应用场景,为改善音频体验提供了更多可能性。

该论文被第45届国际声学、语音与信号处理会议(ICASSP2020)录用并被邀演讲。

ICASSP是语音领域高等级的国际会议,在语音识别、语音合成等方面汇集了全球领先的理论研究与技术应用成果。

被邀大会分享内容代表着研究内容在国际语音领域处于尖端 水平。

本论文中采用的CGRA技术是一种可以根据算法和应用重构硬件资源的新型芯片架构技术,灵活性、通用性强,可以完美适配不断变化的新的算法,可灵活支持各种语音处理算法。

462,优选AI开源框架、AI专用芯片打造AI开源医疗诊断系统

研发基于深度学习的开源医疗诊断解决方案,离不开研发、优选AI开源框架和AI医疗专用芯片。目前著名的AI开源深度学习框架有:谷歌的TensorFlow(已发展到2.0版,并与Kerras融合)、亚马逊的MXNet、脸书的Pytorch、微软的CNTK、百度的飞桨(PaddlePaddle)、旷视的MegEngine,以及贾扬清(现加入阿里集团)Caffe(已发展到2.0版)。

如选TensorFlow,适于工业化部署,如选Pytorch,快速验证模型效果好,如选Caffe,考虑表达、速度和模块化来设计的框架(早期机器视觉的算法是基于Caffe框架的)。

百度飞桨开源框架是国内开发最早、最成熟的框架,今年春天并被选用作为新冠肺炎的检测模型。

今年4月底英伟达与伦敦囯王学院共同宣布研发的MONAI的AI开源框架版本(有人说这个框架是针对医疗保健研究人员的需求进行优化的,是为医学影像研究者量身打造的)。

国内外企业如华为、阿里、腾讯、英特尔、英伟达等研发了一批AI医疗专用芯片。

这就为研发构建AI开源医疗诊断系统创造了条件。

463,从“危机”中找“机遇”

人工智能将如何改变IT企业的运营方式

IBM高级副总裁RobThomas在IBM“ThinkDigital线上大会”上致辞,主题是:AI和自动化将如何改变你的工作方式?

他说在此新冠肺炎疫病流行的当下,我们都在探寻如何应对这场危机,研发将会起到加速器作用的技术。正如“危机”中有“机”,挑战也可能带来了“机遇”。

在抗疫战斗中他举出将人工智能注入工作流程的“火炬手企业”的数据,营收和利润增长了165%。他说,我们注意到:凡是像利用IT技术一样积极采用人工智能(AI),并利用AI改造业务流程的公司,都取得了非凡的业务成果。

随后他邀请一批合作伙伴(客户),如Box、Slack的CEO,在会上共享他们利用AI改造业务流程促进了业务发展的成果。

464,改进脉冲神经网络的时间神经编码的新的训练方法——精确的突触效率调整方法

脉冲神经网络(SNN)是第三代神经网络,在认知任务(例如模式识别)中表现出色。

在生物海马体中发现的时间神经编码机制使SNN拥有比具有其他编码方案的网络更强大的计算能力。但是这种时间编码方法要求神经元以离散化的方式处理信息,这大大降低了学习效率。为了保持时间偏码机制的强大计算能力,并克服其在SNN训练中的低效率,提出了一种新的训练方法,即精确的突触效率调整方法,受到灵长类动物视觉系统的选择性注意机制的启发,我们的算法仅选择目标脉冲时间作为关注区域,而忽略了非脉冲时间的电压状态,从而大大减少了训练时间。此外我们的算法采用了基于输出神经元电位与SNN触发阈值之间的电压差的代价函数,而不是传统的按照时间精确的时间间隔进行触发。

(文载IEEE)

465,探索SNN节能硬件实现

普渡大学研究生院探索生物类似的尖峰神经网络(SNN)的节能硬件实现。讨论SNN系统主要亮点是:①解决基于网络芯片(NOC)的SNN引起的连接性问题,②使用随机函数发生器(BRNG)提出随机CMOS二进制SNN。

针对《评人工智能如何走向新阶段》一文,继续发布国内外的跟贴留言457-465条如下:相关推荐

  1. 《评人工智能如何走向新阶段》后记(再续26)

    427,SNN机理性测试 SNN利用时空处理,脉冲稀疏性和较高的内部神经元带宽来最大化神经形态计算的能量效率.尽管可以在这种情况下使用常规的基于硅的技术,但最终的神经元突触电路需要多个晶体管和复杂的布 ...

  2. 《评人工智能如何走向新阶段》后记(再续25)

    415,开发近红外光激发的纳米探针,监测大脑深层活动,理解神经系统功能机制. 开发.设计电压敏感纳米探针一直是个技术难关. 群体神经元活动的在体监测是揭示神经系统功能机制的关键. 近日<美国化学 ...

  3. 《评人工智能如何走向新阶段》后记(再续16)

    由AI科技大本营下载自视觉中国 181.5种常见的机器学习方法. (1)线性回归linear regression: 一种流行的回归算法,从样本特征的线性组合,linear combination中学 ...

  4. 《评人工智能如何走向新阶段》后记(再续15)

    由AI科技大本营下载自视觉中国 170. 清华大学全球产业研究院和百度大学Alpha学院于2020年1月5日发表(人工智能)产业智能化白皮书讨论AI发展情况,应用TUMC模型,从技术和综合应用场景的角 ...

  5. 《评人工智能如何走向新阶段》后记(再续22)

    352.Nature长文综述:类脑智能与脉冲神经网络前沿 2019年11月28日普渡大学KaushikRoy.AkhileshJaiswal和PriyadarshiniPanda在<Nature ...

  6. 《评人工智能如何走向新阶段》后记(再续23)

    364.DanielPovey领衔开发第二版语音识别开源工具Kaldi Kaldi集成了多种语音识别模型,包括隐马尔可夫和深度学习神经网络,被认为是世界语音识别框架的基石. DanielPovey是著 ...

  7. 《评人工智能如何走向新阶段》后记(再续27)

    439,彩虹一号无人机实现人类永不落地的追求 日媒:中国亮出杀手锏 世界各国一直在研究提高飞机的续航能力 国内研制的彩虹一号无人机采用人工智能和其他高新技术,飞行高度30000米,并终于研制成功实现人 ...

  8. 《评人工智能如何走向新阶段》后记(再续21)

    346.中国抗疫十大黑科技(以人工智能为主力的黑科技) 摘自数邦客(2020.3.30发布) 负压救护车 人工智能机器人:如送餐机器人.消毒机器人.服务型机器人,及机器人呼叫等 呼吸道病毒核配检测试剂 ...

  9. 《评人工智能如何走向新阶段》后记(再续19)

    由AI科技大本营下载自视觉中国 304. 也来讨论构建模拟人类思维过程的认知计算机制,好像这个问题迄今尚未获得解决. 我们先从输入的信息类型说起:一类是语言输入(包括词.句.文本),第二类是图像输入( ...

  10. 《评人工智能如何走向新阶段》后记(深谈人工智能发展前沿)

    由AI科技大本营下载自视觉中国 来自国内外的跟贴留言 深谈人工智能发展前沿 自从我们发表<评人工智能如何走向新阶段>一文以来,至今约5个月,引来了中外专家.草根们的大量跟贴留言(也有人转录 ...

最新文章

  1. Windows Server 2008 SVN 配置
  2. 为什么有的系统的事务码BSP_WD_CMPWB看不见Enhance Component这个按钮
  3. 【CyberSecurityLearning 52】Web架构安全分析(web工作机制、HTTP协议)
  4. OpenHub框架进行的异步通信
  5. Netty进行文件传输
  6. 【Linux】centos7安装bcp报错
  7. 小学生通用计算机在线使用,Win7电脑可以使用一起小学软件的方法
  8. 儿童素描手绘创意设计字体 for mac
  9. C#汉字转拼音的实现方法
  10. archlinux 分区
  11. linux的syn攻击软件,linux 防御SYN攻击步骤详解
  12. 【生产者分析一】Kafka生产者流程【初探】
  13. 浅谈学习Scratch的必要性
  14. 关于决策树可视化各项展示数据的解读(泰坦尼克号预测生还案例Titanic)
  15. 台式电脑计算机用不了,台式电脑关不了机怎么办
  16. 深度好文 | YOLOv5+DeepSORT多目标跟踪深入解读与测试(含源码)
  17. [英语语法]词法之独立主格
  18. php做mes系统,mes系统的七大功能是什么
  19. Tensorflow+YOLO V4框架使用教程+YOLO V4获取识别框高度+基于相似三角形算法的物体距离测量
  20. 随意组合、palindorm、电话号码 程序设计

热门文章

  1. 15-shell 输入/输出重定向
  2. Python 字典(Dictionary)
  3. javascript promise编程
  4. HTML5学习笔记二 HTML基础
  5. centos下LAMP之源码编译安装httpd
  6. sql查询语句优化需要注意的几点
  7. 红旗Linux认证简介
  8. linux 内核 sscanf,linux sscanf()
  9. 泰晤士报华科计算机排名,国内大学排行被“高估”的三所985大学,实力远小于排名,你认可吗?...
  10. 理解java虚拟机工作后了解吗,【深入理解JAVA虚拟机】第4部分.程序编译与代码优化.2.运行期优化。这章提到的具体的优化技术,应该对以后做性能工作会有帮助。...