作者:贾扬清
链接:https://www.zhihu.com/question/392035070/answer/1230171680
来源:知乎
著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。

1. 框架的沉浮。回答里面提到Caffe2,它的设计早于Tensorflow,计算图是从Purine的想法借鉴的,当时Google Brain还是按照神经元base的方式来做。从需求的角度讲,当时的核心挑战是系统部署能力,这是在Facebook里头非常重视的一点,应该说是在企业级框架当中第一个可以同时以一套系统部署在云上广告推荐训练以及端上AI/AR场景的平台。

但是每一个平台都有自己的强项和弱项。一个框架在系统上很强,相应的生态就会稍弱一些:大公司内部的需求和科研人员/长尾应用的需求是不一样的。一个需要处理PB级数据的系统,绝对会放弃易用性,而易用性对于开发者社区是极端重要的。从这个角度,我觉得mxnet已经在不可能的方向上利用自己的资源做了很多事情,无论是推动Gluon,还是做“动手学深度学习”。结果不论,但是在系统和生态的平衡上主动做了很多事情。

这个取舍,从第一天我们设计系统的时候是考量过的。在FB我们当时还做过这样的分析:“从人力上,我们无法长期和Google进行全面的对抗,因此我们的策略是解决Facebook的业务核心问题,广告、端上智能,等等。Tensorflow的长线在于大兵团作战,而我们的长线在于快速迭代解决业务需求。我们要一直保证在我们自己的需求上面,和TensorFlow保持六个月的优势”。

回头看我觉得这个策略非常成功,也推动了系统上的创新,ImageNet in an Hour被Jensen评价”也许是2017年深度学习系统最重要的论文“。据我理解,Facebook今天广告、手机AI等方面,前端在逐渐转向pytorch原语,后端系统继续使用caffe2的高性能架构。这和我离开前和Facebook同事设计的PyTorch 1.0的策略是一致的。

当然,这一段当中还是走了弯路,一度因为开源的热情,我还是推过Caffe2的社区,后来反思起来,任何一个系统都有长有短,通过Caffe2要解的是业务系统的问题,不是社区的问题,不应该全部通吃。后来我们将外部品牌统一为PyTorch,也是这样的一个思考。窃以为,mxnet的路线如何走,其实和这一堆的机器学习框架的分分合合都有相似性,关键是“我能解决谁的痛点,以及什么痛点”。造轮子不是目的,解决新的痛点才是目的。

非常感谢

@刘若泽

的批评,也是借机解释一下,在系统设计以及业务设计这个层面上的思考。

2. 所谓真实的想法。对我的批评是说“在和阿里聊但是假装说没有的事”。这可能指的是之前的这个回答:https://www.zhihu.com/question/66481733/answer/244549963

这个问题的背景是,另一个知友的回答当中讲到,“深度学习框架Caffe的作者Yangqing Jia想回国发展,于是给阿里投了简历,内部评估下来最终给了个P7+的Offer,后来就没有后来了。”。我当时的确没有投过简历,offer也的确无从谈起,因此,我本着对于自己公司(Facebook)和对同行的尊重辟了谣。即使是当年,我对阿里的评价也是“大家都是非常真诚和优秀的人” - 大家都是成人,不是说没选择的就是坏的,你说对不?

加入阿里是两年之后的事情,从个人的角度来说,Facebook工作非常开心,但是Facebook不做对外云业务,场景还是比较固定的,做的事情熟了就希望找对自己更大的挑战,而阿里对我也很信任,愿意相信我对于学习业务的热情,愿意交给我一块业务。2017年的时候没有意愿,2019年是职业发展的新思维。我相信大家博士毕业的时候都是想找一个好工作,然后工作几年之后想找一个更大的场景挑战自己,一样的。

这周我们事业部kickoff,我们一位一线同学在Q&A的时候和我说,”扬清,去年kickoff的时候我提过一个反馈,你对业务的熟悉程度不太够。今年我觉得比较欣慰的是,现在你开始重视业务,讲业务方法论了“,然后他对我提了新的问题和要求。这是我觉得弥足珍贵的地方,有这样一群人一起在做事情。阿里有没有问题?有!说没有问题的都是假的。像上面的同学说的一样,我作为一个事业部一号位对业务还不熟,那就是问题。但是我觉得总要解,面对问题解决问题才是重点。

我和Facebook的老战友关系依然紧密,如果有谁想去Facebook AI部门,只要你能力在,我给你refer。如果谁想来阿里我的部门,我非常欢迎。

这就再带回到沐神的团队的事情上。这件事情我的观点是这样的,管理本身就是一个专业,大批人员离职,可能是因为团队在转型,可能是因为需求在转型。我自己看到这个的时候,非常能感觉到李沐的痛苦,一边要带技术,一边要带人,整个AI业务在飞速发展,一个技术leader要一边学管理学业务一边把团队管得有声有色,很难的。说句难听话,你能你试试?我的一位职业上的mentor和我说过一句话,“不要觉得很多管理的事情是虚的,管理不是代码,不是数学,但是也有它的规律,我相信你能学会,但是你得学。”

和李沐多年好友,我自己也经历过从技术leader到技术管理的责任转换的痛苦。这种时候,我旗帜鲜明地反对各种传言吐槽什么的,好聚好散,技术上的争论都可以拿出来说,关键是要把事情做好。相信MXNet团队会解决短时间的问题,在AI系统的领域不断继续创新。

----

最后总是要吐槽一下的,说我官话的站出来评价下,官话有这么说的吗?

如何评价Facebook Training ImageNet in 1 Hour这篇论文? - 贾扬清的回答 - 知乎 https://www.zhihu.com/question/60874090/answer/181672076

如何评价清华大学发布的自研深度学习框架-计图(Jittor)? - 贾扬清的回答 - 知乎 https://www.zhihu.com/question/380993685/answer/1092398223

有句网络用语说得好,“我看众人皆sb,料众人看我亦如是”。那么多年在老师同事朋友的沟通当中我学到很多,心存敬畏,心存感激。你觉得是官话请自便。

===========================================

李沐​

深度学习(Deep Learning) 话题的优秀回答者

--- 5/17 更新 ---

没料到大家如此热心,所以补充几点。

  1. 这也能上热搜?这个是买的吗?
  2. 人员离开不是一件轻松的事情,特别是疫情期间。对每个主动想走的人我都长聊过,做了极大的挽留,例升职规划,讨论有挑战的新项目。对于是请走的人,也是有公司第三方团队和第三方律师事务所进行半年以上的评估和改进尝试。我们组发展了三年多,除了之前有位小伙伴想回家发展外,这是首次有人离开,所以不奇怪引人关注。
  3. 过去一年一直在招能管理科学家团队的经理,如果各位有兴趣请私信我。另外,接下来我们会进行大规模招聘,敬请期待。
  4. mxnet处境。质疑一直有,pytorch和tensorflow也确实强大。facebook和google可以花很大资源来支持开源,不管是人力还是宣传,而且可以强迫自己公司团队使用自家产品。mxnet的资源一直是别人的1/10,我们将资源都集中解决客户问题上(亚马逊的准则之一:客户至上),很多项目我们并没有宣传。下面是几个我们公开的项目:
    1. 《动手学深度学习》最早是作为mxnet文档来做的,现在已经被包括cmu/stanford/berkeley/mit等近100所高校作为教材使用。Nvidia创始人Jensen特意为此写了推荐语。
    2. ResNeSt是GluonCV 0.7中的工作 https://github.com/dmlc/gluon-cv/releases/tag/v0.7.0 刷爆了各大榜单
    3. GluonNLP把BERT的inference速度降到百万次不到一块钱。
    4. AutoGluon是我们在automl的首次尝试,比我们知道的所有工作都要块和准。
    5. MXNet的model zoo下载量在百万级别。
    6. 还有几个大招在做,敬请期待接。
  5. 关于烧钱。我们最近的工作ResNeSt拿到了检测和分割的多个第一,知乎上也有很多文章讨论。至于说花费比较大,花费更大的工作我们今年做了好几个,只要能推动技术进步,我们会不切余力的投入。

------

最近两个月我们组确实有人离开,在我看来是组织发展下的正常新城代谢。

  1. 最近做了一些思考,想象世界五年后是什么样,从那里出发来重新考虑项目优先级。例如automl会不会是让深度学习更加普及的一个主驱动力,未来几年有什么可以做的(高效的算法,高效的系统,成本更低的硬件,宣传好结果来改变大家的看法)。我们定了两个方向,作为我们的主攻方向。
  2. 之前我们跟工程组一起做了很多纯工程项目。在我看来,我们应该是做合作组不能做的(例如深度学习系统API设计,新系统开发),而不是跟人抢项目。自然会有小伙伴做完这些项目后,觉得新项目太挑战,想换个环境。
  3. 将我们的工作变成”essential“(amazon在疫情期间优先派送essential的商品),这个一直是研究工作的一个难点。我们的做法是,开始一个新的需要大量资源的研究项目前,先跟可能会用到的产品组联系,看看他们的实际需求。这个改变会让做先马行空研究的小伙伴觉得不自由,从而可能离开。

============================================

作者:hopeispower
链接:https://www.zhihu.com/question/392035070/answer/1228365453
来源:知乎
著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。

给回答里的各位自我介绍一下,本人2018年3月入职mxnet团队,自入职至今是在mxnet项目上贡献commit数量最多的contributor,也是社区committer。链接为证:https://github.com/apache/incubator-mxnet/graphs/contributors?from=2018-03-05&to=2020-05-16&type=c,本人就是那个haojin2。同时,我也是近期从mxnet团队离职的成员之一,去向是亚马逊内部的其他team。

其实我在知乎上是从来没有发过回答的,今天鼓起勇气发这个实名回答的原因主要是看到沐神的高赞回答以后,想为这个事件提供另一个视角。而且鉴于我之前一直属于team里的喜剧担当,现在已经有一些同仁来问我某些问题下针对mxnet阴阳怪气的回答是不是我写的,所以也是借此机会澄清一下,真不是我写的啊QAQ。当然我也不是沐神这样的大V,没有什么公信力,所以各位吃瓜群众对于我的说法愿意信就信,不愿意信的看过算过就行了。

其实沐神待我也是不薄,并且我对mxnet这个项目也算是有一些感情的。在开发之余,我也担当了mxnet生态系统一些PR blog的翻译润色和校对工作,各位去翻一下的话应该可以看到我的名字。尽管如此,我最终在近期选择了离职主要是因为总体上mxnet ecosystem的蛋糕没有做大,反而是越来越小,如此一来team内的上升空间也就缩小了。虽然mxnet渐渐成为我的舒适区,但是我也清醒地认识到不能再继续温水煮青蛙了。尤其是过去一年中有一多半的精力放在mentor我们在AWS Shanghai AI Lab的实习生上,没有很多时间去打磨和提升自己的技术。

其实我觉得大家也不必要把这件事想得太复杂,其实就是大家走到分岔路口时选择了各自适合的道路而已。作为一个在mxnet上花费了1年多时光的人,心底里还是希望mxnet ecosystem可以壮大的,祝沐神&mxnet今后越来越顺利。

如何看待亚马逊 AI 李沐团队大批人员离职?相关推荐

  1. 半小时训练亿级规模知识图谱,亚马逊AI开源知识图谱嵌入表示框架DGL-KE

    出品 | AI科技大本营(ID:rgznai100) 知识图谱 (Knowledge Graph)作为一个重要的技术,在近几年里被广泛运用在了信息检索,自然语言处理,以及推荐系统等各种领域.学习知识图 ...

  2. 探索“老药新用”最短路径:亚马逊AI Lab开源大规模药物重定位知识图谱DRKG

    本文经授权转载自机器之心(almosthuman2014),未经授权禁止二次转载与摘编. 本文长度为3200字,建议阅读9分钟 本文带你了解亚马逊AI实验室的开源机器学习工具. [ 摘要 ]最近,来自 ...

  3. 半小时训练亿级规模知识图谱,亚马逊AI开源知识图谱嵌入表示框架

    来源:AI 科技大本营 本文约2300字,建议阅读9分钟 亚马逊 AI 团队开源了一款专门针对大规模知识图谱嵌入表示的新训练框架 DGL-KE,能让研究人员和工业界用户方便.快速地在大规模知识图谱数据 ...

  4. 亚马逊 ai 解雇_解雇社区成员

    亚马逊 ai 解雇 欢迎大家,在我的" 六度"专栏中发表第二篇文章. 当我很高兴返回时,你们都把我的第一篇专栏文章搞砸了. 我在思索有关Ubuntu手机对开放源代码的影响方面的文章 ...

  5. 霍金最后一篇论文上线;世界最快的深度算法现身;波士顿机器人跑酷;亚马逊AI招聘重男轻女被骂下架...

    大家好,我是为人造的智能操碎了心的智能禅师. 今天是美好的周一,也是国际调节椅子日.经常坐椅子工作的人,因为久坐不动,时间长了就会产生各种问题.所以设立这个节日也是为了提醒大家,椅子一定要买人体工程学 ...

  6. 亚马逊AI又遭抗议:一个好端端的美国官员,怎么就成罪犯了?

    李根 发自 凹非寺  量子位 报道 | 公众号 QbitAI 哈哈哈. 如果你近期稍微关注到亚马逊在美遭遇的抗议和diss,想必对ACLU这个组织不会陌生. ACLU,全称The American C ...

  7. 亚马逊 ai 解雇_绿色是使用AI的新的黑色节约型亚马逊雨林

    亚马逊 ai 解雇 新成果 /使用AI的节约环境/哈佛 AI促进社会公益 / IEEE SMC 2020 接受 (New results / Saving Environment using AI / ...

  8. 亚马逊AI编程助手CodeWishperer的使用

    IntelliJ IDEA安装亚马逊AI编程助手CodeWishperer 简介 CodeWishperer是亚马逊2023年4月份推出的实时AI编程助手,它可以实时分析开发人员所写的代码并根据内容为 ...

  9. 如何评价亚马逊AI新开源自动机器学习项目AutoGluon?

    链接:https://www.zhihu.com/question/360250836 编辑:深度学习与计算机视觉 声明:仅做学术分享,侵删 作者:李沐 https://www.zhihu.com/q ...

最新文章

  1. CentOS 6.2 yum安装配置lnmp服务器(Nginx+PHP+MySQL)
  2. matlab读int16读文件_MATLAB: 使用内存映射加快文件读写
  3. 目标意识应求成大于避败 思考时不要先意识到身不足而自我设限
  4. 华为服务器系统关机命令,云服务器关机指令
  5. mybatis there is no getter named forInteger
  6. java注解字段类型相同_《java基础学习之——重复注解》
  7. kafka topic 目录存放在哪_Kafka系列文章之安装测试-第2篇
  8. 《面向机器智能的TensorFlow实践》一 2.8 测试TensorFlow、Jupyter Notebook及matplotlib...
  9. 洛谷P1411 砝码称重
  10. 【第二周】结对编程体会
  11. 异步任务,HttpContext.Current为null解决办法
  12. ROS 发布kitti数据集的gps信息
  13. html图片下载链接怎么弄_html 导入图片
  14. html5动漫人物小部件制作,虚拟动漫人物制作器app
  15. 第五节 电阻分压 蓦然回首,那人却在,灯火阑珊处
  16. linux c++ opencv4安装指南
  17. 主析取范式和主合取范式
  18. 保存网页内容为PDF,支持文本复制,链接跳转
  19. JS计算时间差;.net计算时间差
  20. spring集成shiro原理

热门文章

  1. to_excel() got an unexpected keyword argument ‘sheetname‘
  2. NLP - 15 分钟搭建中文文本分类模型
  3. pandas怎么选取dataframe中几列
  4. tomcat1.8,tomcat-users.xml文件中如下修改才可以使用app manager登录,其中的roles有哪些枚举需要确认
  5. 生活总有烦心事? 可能是你数学不好
  6. 谁说数学不好,就不能成为编程大佬
  7. ECMAScript 和 JavaScript 的未来
  8. 7 = 350 000 000 ?!
  9. 深入理解风格迁移三部曲(三)--FUNIT
  10. TensorFlow安装 通过Anaconda Prompt Win10 64位安装 cpu版 tensorflow