2017年已经结束了，还有什么比回顾这一整年中AI的发展历程更激动人心的吗？

AI大事件的作者Denny Britz梳理了2017整年的AI大事，人工智能从研究到应用领域的回顾，都在这篇AI超大事件里了。

强化学习在很多游戏上达到了超人表现

今年AI领域最成功的故事可能就是AlphaGo了（Nature论文），AlphaGo是一个强化学习代理，击败了世界上最好的国际象棋棋手。

AlphaGo的第一个版本使用来自人类专家的训练数据进行引导，并通过自我对弈和蒙特卡洛树搜索进一步提升。不久之后，AlphaGo Zero（Nature论文）更进了一步，学习如何从头开始玩国际象棋，不需要任何人工训练数据，使用先前发表在 Thinking Fast and Slow with Deep Learning and Tree Search中的技术。它轻松击败了AlphaGo的第一个版本。

而在今年年底，我们又看到了AlphaGo Zero算法的另一个升级，称为AlphaZero，它不仅掌握了国际象棋，而且在将棋上也使用了相同的技术。有意思的是，人工智能代理的游戏策略使得很多经验丰富的人类玩家都大受启发，从而激励玩家从AlphaGo中学习并相应地调整自己的游戏风格。为了使这个学习过程更容易，DeepMind还发布了AlphaGo Teach工具。

但是AlphaGo并不是人工智能取得重大进展的唯一游戏。来自CMU的研究人员开发的Libratus（Science论文）在一场为期20天的无限德州扑克锦标赛中成功击败了顶级人类玩家。 稍早些时候，由查尔斯大学，捷克技术大学和艾伯塔大学的研究人员开发的DeepStack系统成为第一个击败专业扑克玩家的系统。 请注意，这两个系统针对的是双人扑克，比在多个玩家中游戏容易。后者很可能会在2018年取得进一步的进展。

强化学习的下一个领域是包括多人扑克在内的多人游戏。DeepMind正在积极研究“星际争霸2”，并在2017年发布了研究环境，而OpenAI已经在1v1 Dota 2上击败了顶级人类玩家，目标是在不久的将来于5v5游戏中全面击败人类玩家。

class="video_iframe" frameborder="0" scrolling="no" allowfullscreen="" data-w="480" data-ratio="1.7647058823529411" data-vidtype="2" data-src="http://v.qq.com/iframe/player.html?vid=x05385tfnib&width=654&height=367.875&auto=0" style="display: block; width: 654px !important; height: 367.875px !important;" width="654" height="367.875" data-vh="367.875" data-vw="654" src="http://v.qq.com/iframe/player.html?vid=x05385tfnib&width=654&height=367.875&auto=0"/>

遗传算法东山再起

对于监督式学习，使用反向传播算法的基于梯度的方法对于研究者来说已经非常熟练了。但同时，在强化学习中，进化策略（ES）似乎正在东山再起。由于数据通常不是iid（独立且分布相同）的，因此错误信号更加稀疏，而且由于需要进行探索，所以不依赖于梯度的算法可以更好地工作。此外，遗传算法可以线性扩展到数千台机器，从而实现极快的并行训练，不需要昂贵的GPU。

今年早些时候，来自OpenAI的研究人员证明，遗传算法可以实现与标准的强化学习算法（如Deep Q-Learning）相媲美的性能。今年年底，Uber的一个团队发布了一篇博文和一组五篇研究论文，进一步展示了遗传算法的潜力。下面这个视频展示了使用各种算法玩Atari游戏的得分情况，GA策略得分为10500，而DQN，AC3和ES在这个游戏中得分低于1,000。

class="video_iframe" frameborder="0" scrolling="no" allowfullscreen="" data-w="272" data-ratio="0.7727272727272727" data-vidtype="2" data-src="http://v.qq.com/iframe/player.html?vid=p1331oee2yn&width=654&height=490.5&auto=0" style="display: block; width: 654px !important; height: 490.5px !important;" width="654" height="490.5" data-vh="490.5" data-vw="654" src="http://v.qq.com/iframe/player.html?vid=p1331oee2yn&width=654&height=490.5&auto=0"/>

WaveNets，CNN和注意机制

谷歌的Tacotron 2文本转语音系统产生了极其精准的音频样本，这项技术基于WaveNet。这是一种自动回归模型，也被部署在谷歌助理中，并在过去一年中实现了大幅的速度提升。 WaveNet之前也被应用于机器翻译，从而减少了经常性架构的训练时间。

从机器学习子领域看，花费很长时间进行训练的经常性架构逐渐成为一种趋势。研究人员完全摆脱了复发和卷积，并使用更复杂的注意力机制，达到了在训练成本很低的情况下的最高水平。

深度学习框架的一年

如果我不得不用一句话总结2017年，那我会说是“框架的一年”。Facebook使用PyTorch做了一个大跃进。 由于其动态图形结构与Chainer提供的类似，PyTorch从自然语言处理的研究人员那里得到了更多的青睐，他们经常需要处理在Tensorflow等静态图形框架中很难声明的动态和循环结构。

Tensorflow在2017年已经相当成功.Tensorflow 1.0在2月份发布了一个稳定且向后兼容的API。 目前，Tensorflow的版本是1.4.1。 除主框架之外，还发布了多个Tensorflow伴随库，包括用于动态计算图的Tensorflow Fold，用于数据输入管道的Tensorflow Transform以及DeepMind的更高级别的Sonnet库。 Tensorflow团队还宣布了一个新的热切执行模式，其工作方式类似于PyTorch的动态计算图。

除Google和Facebook之外，还有许多其他公司也加入了机器学习框架的行列：

• 苹果公司发布了CoreML移动机器学习库。

• Uber的一个团队发布了Pyro，一种深度概率编程语言（Deep Probabilistic Programming Language）。

• 亚马逊（Amazon）宣布在MXNet上提供更高级别的API，即Gluon。

• Uber发布了其内部米开朗基罗机器学习基础设施平台的详细信息。

而且由于框架的数量逐渐泛滥，Facebook和微软发布了ONNX开放格式，以便跨框架共享深度学习模式。 例如，您可以在一个框架中训练您的模型，然后在另一个框架中投入生产。

除了通用的深度学习框架外，我们还看到大量的强化学习框架正在发布中，其中包括：

• OpenAI Roboschool是一款用于机器人仿真的开源软件。

• OpenAI Baselines是一套强化学习算法的高质量实现库。

• Tensorflow代理包含优化的基础设施，使用Tensorflow来训练RL代理。

• Unity ML Agents允许研究人员和开发人员使用Unity Editor创建游戏和模拟，并使用强化学习进行训练。

• Nervana Coach允许使用最先进的强化学习算法进行实验。

• Facebook的游戏研究ELF平台。

• DeepMind Pycolab是一个可定制的网格世界游戏引擎。

• Geek.ai MAgent是一个多代理强化学习的研究平台。

为了让深度学习更容易部署，我们也看到了一些Web的框架，比如谷歌的deeplearn.js和MIL webdnn执行框架。但至少有一个非常流行的框架在2017年结束了它的生命，那就是Theano，开发商决定Theano 1.0将成为Theano的最后一个版本。

学习资源

随着深度学习和强化学习越来越受欢迎，越来越多的讲座，训练营和活动已经在2017年在线录制和发布。以下是我最喜欢的一些：

• 由OpenAI和加州大学伯克利分校联合主办的Deep RL Bootcamp讲授了关于强化学习的基础知识以及最新研究成果。

• 斯坦福大学2017年春季版视觉识别卷积神经网络课程。可以查看课程网站。

• 斯坦福大学自然语言处理与深度学习课程2017年冬季版。 可以查看课程网站。

• 斯坦福的深度学习理论课程。

• 新的Coursera深度学习专业。

• 蒙特利尔的深度学习和暑期加强学校。

• 加州大学伯克利分校2017年秋季深度强化学习课程。

几个学术会议延续了在网上发布会议的新传统。 如果您想赶上尖端的研究，您可以观看NIPS 2017，ICLR 2017或EMNLP 2017的一些录像。

研究人员也开始在arXiv上发布教程和调查论文。 这是2017年中我的最爱：

• Deep Reinforcement Learning: An Overview

• A Brief Introduction to Machine Learning for Engineers

• Neural Machine Translation

• Neural Machine Translation and Sequence-to-sequence Models: A Tutorial

AI应用之“艺术”

2017年开始获得更多关注的应用是图像，音乐，草图和视频的生成性建模。 NIPS 2017年会议首次推出了机器学习创意与设计研讨会。

最流行的应用程序之一是谷歌的QuickDraw，它使用神经网络来识别你的涂鸦。 使用开源的数据集，您甚至可以教机器为您完成您的绘图。

GANs今年取得了重大进展。 例如，CycleGAN，DiscoGAN和StarGAN等新模型在生成人脸方面取得了令人印象深刻的成果。 GANs在过去难以生成逼真的高分辨率图像，但pix2pixHD的结果表明，研究者们正在解决这些问题。 GANs会成为人类的新画笔吗？让我们在2018年拭目以待。

AI应用之“自动驾驶”

自驾车领域的大玩家是Uber和Lyft，Alphabet的Waymo和Tesla。 由于软件错误，Uber在旧金山错过了几盏红灯。之后，Uber分享了内部使用的汽车可视化平台的细节。Uber的自驾车计划在12月份达到了200万英里。

与此同时，Waymo的自驾车在四月份成为了第一批真正的AI车手，后来在亚利桑那州的凤凰城完全取消了操作人员。 Waymo还公布了他们的测试和模拟技术的细节。

那些酷酷的研究项目

2017年发布了许多有趣的项目，在这里不可能一一列举。 只能对那些脱颖而出的稍作介绍：

• Background removal with Deep Learning

• Creating Anime characters with Deep Learning

• Colorizing B&W Photos with Neural Networks

• Mario Kart (SNES) played by a neural network

• A Real-time Mario Kart 64 AI

• Spotting Forgeries using Deep Learning

• Edges to Cats

更偏向研究的项目：

• The Unsupervised Sentiment Neuron – 一个学习情绪的优秀系统，尽管只是被用来预测亚马逊评论文本中的下一个字符。

• Learning to Communicate – 开发自己语言的人工智能代理。

• The Case for Learning Index Structures – 使用神经网络优化高速缓存的B-树，速度高达70％，同时通过多个实际数据集在内存中节省数量级。

• Attention is All You Need

• Mask R-CNN – 对象实例分割的一般框架

• Deep Image Prior for denoising, superresolution, and inpainting

数据集

用于监督学习的神经网络以数据饥饿而闻名。 所以开源数据集对研究界来说是一个非常重要的贡献。 以下是今年出现的几个数据集：

• Youtube Bounding Boxes

• Google QuickDraw Data

• DeepMind Open Source Datasets

• Google Speech Commands Dataset

• Atomic Visual Actions

• Several updates to the Open Images data set

• Nsynth dataset of annotated musical notes

• Quora Question Pairs

深度学习的挑战：可重复性和炼金术

在2017年，一些研究人员对学术论文结果的可重复性提出了担忧。深度学习模型通常需要大量的超参数，必须对其进行优化才能获得足够好的结果。这种优化通常非常昂贵，昂贵到只有像Google和Facebook这样的公司才能负担得起。研究人员并不总是发布他们的代码，并且出于各种原因忘记把重要的细节放到完成的论文中，这使得可重复性成为一个很大的问题。在Reinforcement Learning That Matters这篇文章中，研究人员表明，使用相同的算法和不同的基础代码使得结果出现了很大的不同和很高的方差：

在Are GANs Created Equal? A Large-Scale Study这篇文章中，研究者表明，使用昂贵的超参数搜索进行调整的GAN可以击败更为复杂的方法。同样，在 On the State of the Art of Evaluation in Neural Language Models中，研究人员表明，简单的LSTM架构，如果适当规范化和调整，可以胜过更多的近期模型。

在许多研究人员的共同努力下，阿里·拉希米（Ali Rahimi）将最近的深度学习方法与炼金术进行了比较，并呼吁进行更严格的实验设计。然而Yann LeCun将他的讲话视作对深度学习的侮辱，并在第二天进行了反驳。

中国和加拿大的人工智能发展

随着美国移民政策收紧，越来越多的公司开始在海外开设办事处，加拿大成为主要目的地。 Google在多伦多开设了一个新的办公室，DeepMind在加拿大埃德蒙顿开设了一个新办公室，Facebook AI Research也扩展到了蒙特利尔。

中国是另一个倍受关注的目的地。 由于拥有大量的资金，大量的人才库和政府数据，在人工智能的发展和生产部署方面，它正在与美国竞争。Google日前宣布即将在北京开设一个新实验室。

硬件大战：Nvidia, Intel, Google, Tesla

现代深度学习技术要求昂贵的GPU来训练最先进的模型。 到目前为止，NVIDIA一直是最大的赢家。今年，它发布了Titan V旗舰GPU。但是竞争无处不在， Google的TPU现在可以在其云平台上使用，英特尔的Nervana推出了一套新的芯片，甚至特斯拉也公开表示它正在开发自己的AI硬件。竞争也可能来自中国，专门从事比特币挖掘的硬件制造商希望进入以人工智能为核心的GPU领域。

炒作和失败

对于人工智能的炒作在2017年达到了新的巅峰，主流媒体的报道与研究实验室或生产系统实际发生的事情几乎从不相符。IBM Watson成为了过度营销的传奇，但它却从未提供相应的、令人满意的成果。今年，每个人都开始讨厌Watson，这在它于医疗方面一再失败之后也并不奇怪。

今年获得最多炒作的故事可能是Facebook的“研究人员关闭发明自己语言的AI”，其实这件事情的本质仅仅是研究人员停止了一个结果不太好的标准实验而已。

然而更值得注意的是，不仅仅媒体应当因为炒作被钉在历史的耻辱柱上。研究人员也在论文的标题和摘要中大吹特吹，这些标题和摘要不能反映实际的实验结果，比如 natural language generation paper和 Machine Learning for markets.

高调招聘和离职

Coursera的联合创始人Andrew Ng（他的机器学习MOOC可能是最著名的），在今年多次被报道。 Andrew在三月份离开百度领导的AI集团，筹集了1.5亿美元的基金，并成立了一个专注于制造业的新公司landing.ai。 在其他消息中，Gary Marcus辞去了Uber人工智能实验室主任的职务，Facebook聘请了Siri的自然语言理解部门负责人，几位著名的研究人员离开了OpenAI，开创了一家新的机器人公司。

学术界的科学家不断流失到业界的趋势也在继续，大学实验室抱怨说，他们无法与行业巨头提供的薪水竞争。

初创企业投资和收购

就像去年一样，AI创业的生态系统正在蓬勃发展，并进行了几次高调的收购：

• Microsoft收购了深度学习创业公司MAluuba

• 谷歌宣布收购全球最大数据科学社区KaggleGoogle Cloud收购Kaggle

• Softbank收购机器人制造商Boston Dynamics（以不太使用机器学习而闻名）

• Facebook收购AI助理公司Ozlo

• Samsung收购Fluently来建设Bixby

很多创业公司也拿到了巨额风投：

• Mythic筹集了880万美元，意图将AI集成到芯片上

• Element AI，为公司建立人工智能解决方案的平台，筹集了1.02亿美元

• Drive.ai筹集了5000万美元，并将Andrew Ng加入董事会

• Graphcore筹集了3000万美元

• Appier发布了3300万美元的C系列

• Prowler.io筹集了1300万美元

• Sophia Genetics筹集了3000万美元帮助医生使用AI和基因组数据进行诊断

最后，祝大家新年快乐！感谢大家对AI大事件系列的关注和支持！

人工智能赛博物理操作系统

AI-CPS OS

“人工智能赛博物理操作系统”（新一代技术+商业操作系统“AI-CPS OS”：云计算+大数据+物联网+区块链+人工智能）分支用来的今天，企业领导者必须了解如何将“技术”全面渗入整个公司、产品等“商业”场景中，利用AI-CPS OS形成数字化+智能化力量，实现行业的重新布局、企业的重新构建和自我的焕然新生。

AI-CPS OS的真正价值并不来自构成技术或功能，而是要以一种传递独特竞争优势的方式将自动化+信息化、智造+产品+服务和数据+分析一体化，这种整合方式能够释放新的业务和运营模式。如果不能实现跨功能的更大规模融合，没有颠覆现状的意愿，这些将不可能实现。

领导者无法依靠某种单一战略方法来应对多维度的数字化变革。面对新一代技术+商业操作系统AI-CPS OS颠覆性的数字化+智能化力量，领导者必须在行业、企业与个人这三个层面都保持领先地位：

1. 重新行业布局：你的世界观要怎样改变才算足够？你必须对行业典范进行怎样的反思？

2. 重新构建企业：你的企业需要做出什么样的变化？你准备如何重新定义你的公司？

3. 重新打造自己：你需要成为怎样的人？要重塑自己并在数字化+智能化时代保有领先地位，你必须如何去做？

AI-CPS OS是数字化智能化创新平台，设计思路是将大数据、物联网、区块链和人工智能等无缝整合在云端，可以帮助企业将创新成果融入自身业务体系，实现各个前沿技术在云端的优势协同。AI-CPS OS形成的数字化+智能化力量与行业、企业及个人三个层面的交叉，形成了领导力模式，使数字化融入到领导者所在企业与领导方式的核心位置：

1. 精细：这种力量能够使人在更加真实、细致的层面观察与感知现实世界和数字化世界正在发生的一切，进而理解和更加精细地进行产品个性化控制、微观业务场景事件和结果控制。

2. 智能：模型随着时间（数据）的变化而变化，整个系统就具备了智能（自学习）的能力。

3. 高效：企业需要建立实时或者准实时的数据采集传输、模型预测和响应决策能力，这样智能就从批量性、阶段性的行为变成一个可以实时触达的行为。

4. 不确定性：数字化变更颠覆和改变了领导者曾经仰仗的思维方式、结构和实践经验，其结果就是形成了复合不确定性这种颠覆性力量。主要的不确定性蕴含于三个领域：技术、文化、制度。

5. 边界模糊：数字世界与现实世界的不断融合成CPS不仅让人们所知行业的核心产品、经济学定理和可能性都产生了变化，还模糊了不同行业间的界限。这种效应正在向生态系统、企业、客户、产品快速蔓延。

AI-CPS OS形成的数字化+智能化力量通过三个方式激发经济增长：

1. 创造虚拟劳动力，承担需要适应性和敏捷性的复杂任务，即“智能自动化”，以区别于传统的自动化解决方案；

2. 对现有劳动力和实物资产进行有利的补充和提升，提高资本效率；

3. 人工智能的普及，将推动多行业的相关创新，开辟崭新的经济增长空间。

给决策制定者和商业领袖的建议：

1. 超越自动化，开启新创新模式：利用具有自主学习和自我控制能力的动态机器智能，为企业创造新商机；

2. 迎接新一代信息技术，迎接人工智能：无缝整合人类智慧与机器智能，重新

   评估未来的知识和技能类型；

3. 制定道德规范：切实为人工智能生态系统制定道德准则，并在智能机器的开

   发过程中确定更加明晰的标准和最佳实践；

4. 重视再分配效应：对人工智能可能带来的冲击做好准备，制定战略帮助面临

   较高失业风险的人群；

5. 开发数字化+智能化企业所需新能力：员工团队需要积极掌握判断、沟通及想象力和创造力等人类所特有的重要能力。对于中国企业来说，创造兼具包容性和多样性的文化也非常重要。

子曰：“君子和而不同，小人同而不和。”  《论语·子路》云计算、大数据、物联网、区块链和 人工智能，像君子一般融合，一起体现科技就是生产力。

如果说上一次哥伦布地理大发现，拓展的是人类的物理空间。那么这一次地理大发现，拓展的就是人们的数字空间。在数学空间，建立新的商业文明，从而发现新的创富模式，为人类社会带来新的财富空间。云计算，大数据、物联网和区块链，是进入这个数字空间的船，而人工智能就是那船上的帆，哥伦布之帆！

新一代技术+商业的人工智能赛博物理操作系统AI-CPS OS作为新一轮产业变革的核心驱动力，将进一步释放历次科技革命和产业变革积蓄的巨大能量，并创造新的强大引擎。重构生产、分配、交换、消费等经济活动各环节，形成从宏观到微观各领域的智能化新需求，催生新技术、新产品、新产业、新业态、新模式。引发经济结构重大变革，深刻改变人类生产生活方式和思维模式，实现社会生产力的整体跃升。

---

产业智能官  AI-CPS

用“人工智能赛博物理操作系统”（新一代技术+商业操作系统“AI-CPS OS”：云计算+大数据+物联网+区块链+人工智能），在场景中构建状态感知-实时分析-自主决策-精准执行-学习提升的认知计算和机器智能；实现产业转型升级、DT驱动业务、价值创新创造的产业互联生态链。

长按上方二维码关注微信公众号： AI-CPS，更多信息回复：

新技术：“云计算”、“大数据”、“物联网”、“区块链”、“人工智能”；新产业：“智能制造”、“智能农业”、“智能金融”、“智能零售”、“智能城市”、“智能驾驶”；新模式：“财富空间”、“数据科学家”、“赛博物理”、“供应链金融”。

官方网站：AI-CPS.NET

本文系“产业智能官”（公众号ID：AI-CPS）收集整理，转载请注明出处！

---

---

版权声明：由产业智能官（公众号ID：AI-CPS）推荐的文章，除非确实无法确认，我们都会注明作者和来源。部分文章推送时未能与原作者取得联系。若涉及版权问题，烦请原作者联系我们，与您共同协商解决。联系、投稿邮箱：erp_vip@hotmail.com

---

---