深度学习的顶级会议ICLR 2020将于明年 4 月 26 日于埃塞俄比亚首都亚的斯亚贝巴举行。

今日ICLR 2020放榜,最终2594篇论文中共有687篇被接收,其中48篇orals,108篇spotlights,531篇poster。录取率为26.5%,相比去年的31.4%略有下降。

据统计,约有320篇被接收论文中有华人学者参与,占比47%。

ICLR 2020 官方评审页面:

https://openreview.net/group?id=ICLR.cc/2020/Conference

从官方发布的博文可知,今年的审稿过程与去年基本保持不变,但进行了两项调整:大会组委会不允许在评审期间进行公开评论,以使作者和审稿人对讨论的要点有清晰的认知,并且留有一周进行替换和紧急评审。

此外,为了帮助审稿人做出更清晰的决策,今年的评分系统也做了简化,组委会取消了中性评分的选项:只保留“reject(拒绝)、weak reject(弱拒绝)、 weak accept(弱接受) 、accept(接受)”四个选项。

通过将评分分配给上述四项评分选项,以产生平均分数。由于各种原因,分数是不对称分布的,分别为1、3、6和8。对于接收的论文,组委会担心审稿人不愿意给出10分,实际对于作者来说可能希望论文被接收,但并不意味着它应该得到10分。此外,3分到6分之间的较大差距使得弱拒绝和弱接受之间得以有更大区分,以提供更多的建议从而避免“中立”。尽管这些做法有些不典型,但得出的平均值对于最终指导决策还是有意义的。

对于ICLR来说,随着每年提交论文数量的显著增长,导致建立具有丰富经验的大型审稿人库的任务日益艰巨。今年总共有119位AC和2200位审稿人参与了审稿工作,虽然审稿人数没有委员会最初预期的规模那么大,也使得评审人的负担超出了预期,但最终接收论文的质量都很高。

此外,ICLR2020也拒绝了少数论文(不到20篇),因为它们违反了“双重提交政策”。同时也撤回了大量论文,比如与其他会议截止日期临近和重叠,或与其他会议如ACL的“匿名政策”不相符的论文。

详解OpenReview数据

ICLR 2020论文入选结果公布后,来自南加利福尼亚大学计算机专业的博士生小哥哥Sun Shao-Hua对此次提交的论文数据进行了详细分析。此外,他也有一篇论文被接收为spotlight论文。

该OpenReview数据已经上传至:

https://github.com/shaohua0116/ICLR2020-OpenReviewData#Data

论文评分

从ICLR2020论文评分的直方图可见,审稿人的评分分布集中在4分左右(平均为4.1822分)。其中得4分的有367篇;得5分的有266篇;得8分的有34篇。

1.一篇评分为6-8-8的论文被拒了:《Ted: A Pretrained Unsupervised Summarization Model With Theme Modeling And Denoising》https://openreview.net/forum?id=Syxwsp4KDB

2.而一篇评分为1-3-3的论文竟被接收:《Efficient Probabilistic Logic Reasoning with Graph Neural Networks》https://openreview.net/forum?id=rJg76kStwH

3. 得分为3-6-8的论文中有62%被接收;

4. 得分为3-6-6篇论文中只有27.8%被接收。

审稿人评分的累积总和见下图。

ICLR2020关键字

下图是由投稿关键词生成的词云图,突出了深度学习、强化学习、表示学习、生成模型、图形神经网络等热点话题。

TOP50关键字词其频率见下图。

根据审稿人的平均评分和关键词的频率表明,如果想要增加你得高分的几率可以多使用关键字,比如深入学习或梯度下降等。

审稿长度

ICLR 2020平均评审长度为407.91字。直方图如下:

反驳期间审稿人评分发生了变化

所有人的评分变化见下图:

每篇论文的平均评分变化见下图:

满分论文

在ICLR2020上出现了34篇满分论文,其中有不少来自清华、上海交大、哈工大、西安电子科大等国内高校以及华为、字节跳动等国内企业得论文作者。

平均得分为8分的论文

审稿引争议

ICLR,全称为International Conference on Learning Representations(国际学习表征会议),2013年由深度学习三座大山中的 Yoshua Bengio 和 Yann LeCun牵头创办。众所周知,Yoshua Bengio主管着蒙特利尔大学人工智能实验室,也就是 MILA,它是世界上最大的人工智能研究中心之一。Yann LeCun是 Facebook 人工智能研究院的院长,被称为卷积神经网络之父。

虽然ICLR成立仅六年,但它已被学术研究者们广泛认可,被认为是“深度学习的顶级会议”。ICLR 采用Open Review 评审制度。根据规定,所有提交的论文都会公开姓名等信息,并且接受所有同行的评价及提问(open peer review),任何学者都可或匿名或实名地评价论文。而在公开评审结束后,论文作者也能够对论文进行调整和修改。

ICLR 2020的审稿早前受到了诸多吐槽与争议。比如,南大周志华教授曝出:ICLR 2020竟然有47%的审稿人从来没有在本领域发表过论文;再比如,一篇ICLR 2020的论文在拿到完美的满分评价后,其他的两位审稿人又连续给了2个1分评价,还有的论文三位审稿人均给出了6-6-6的高分,但AC却做出了不适用自己论文的评语,这些都引发了激烈的讨论。

放榜之后总是有人欢喜有人忧。总之,恭喜入选的同学!你的论文有入选吗?欢迎给我们留言!

作者| 学术君

排版| 学术青

校对| 小满  子璇

责编| 学术青 优学术

- END -

如果看到这里,说明你喜欢这篇文章,请转发、点赞。扫描下方二维码或者微信搜索「perfect_iscas」,添加好友后即可获得10套程序员全栈课程+1000套PPT和简历模板向我私聊「进群」二字即可进入高质量交流群。

扫描二维码进群↓

在看 

ICLR2020放榜 687篇入选34篇得满分! 且看OpenReview数据图文详解相关推荐

  1. ICLR2020放榜 687篇入选34篇得满分!且看OpenReview数据图文详解

    深度学习的顶级会议ICLR 2020将于明年4月26日于埃塞俄比亚首都亚的斯亚贝巴举行. 近日,ICLR 2020放榜,最终2594篇论文中共有687篇被接收,其中48篇orals,108篇spotl ...

  2. 认真阅读完这篇文章熟练掌握关于IDEA断点调试操作(图文详解)

    设置断点 选定要设置断点的代码行,在行号的区域后面单击鼠标左键即可,再单击取消断点 ctrl + shift + f8 查看取消断点 开启调试会话 shift + f9 调试模式,开始断点调试 断点调 ...

  3. java学习 类变量 类方法_这篇文章主要介绍了JAVA类变量及类方法代码实例详解,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下类变量(...

    这篇文章主要介绍了JAVA类变量及类方法代码实例详解,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下 类变量(static) 类变量是该类的所有对象共 ...

  4. CCIE理论-第十三篇-IPV6-路由-静态+(EIGRP+OSPF)两种做法+IPV4-ARP代理详解(精髓篇)

    CCIE理论-第十三篇-IPV6-路由-静态+(EIGRP+OSPF)两种做法+IPV4-ARP代理详解(精髓篇) 其实呢,路由协议,静态路由 他还是ipv4那一套,只不过多了点东西 该怎么搞怎么搞, ...

  5. 喜大普奔,《大数据架构详解》一书 登陆 当当,京东热卖榜

    2016-11-27 朱洁 大数据和云计算技术 最近加班太多,"江郎才尽了",这周不想写博客了,休息下. 讲点高兴的事情,我的新书<大数据架构详解>登陆当当,京东热卖榜 ...

  6. ICLR2020放榜 34篇满分论文! 48篇orals,108篇spotlights,531篇poster

    点击上方"深度学习技术前沿",选择"星标"公众号 资源干货,第一时间送达 ICLR,全称为International Conference on Learnin ...

  7. NeurIPS 2021论文放榜!清华投稿90篇排名第5,北大第9

    转自:新智元 NeurIPS 2021接收的论文放出了! <argmax centroid>「荣获」最短标题的称号. 作者是来自北京大学的Chengyue Gong,得克萨斯大学奥斯汀分校 ...

  8. 深度篇——目标检测史(七) 细说 YOLO-V3目标检测 之 代码详解

    返回主目录 返回 目标检测史 目录 上一章:深度篇--目标检测史(六) 细说 YOLO-V3目标检测 下一章:深度篇--目标检测史(八) 细说 CornerNet-Lite 目标检测 论文地址:< ...

  9. [玩转UE4/UE5动画系统>应用篇>功能模块] 之 ALS V4地面站立动作状态机详解

    本教程采用图文教程+视频教程的多元化形式,我会为不同的知识点选择适当的表达方式.教程内容将同步免费发布于 开发游戏的老王(知乎|CSDN)的专栏<玩转UE4/UE5动画系统>.教程中使用的 ...

最新文章

  1. Linux 中echo格式控制、重定向 、管道 | 简介
  2. 【教程】EditPlus+MinGW搭建简易的C/C++开发环境
  3. O-R mapping工具
  4. 数据库迁移 编码问题
  5. Java类的加载过程,类加载器,双亲委派原则
  6. hibernate映射文件出现should be mapped with insert=“false“ update=“false“
  7. 计算机系统通过执行通道程序完成数据,计算机系统结构_第四章练习 答案
  8. Fade To Black《消失在黑暗中》BY Metallica [转]
  9. 软件测试工程师简历经验总结:软件测试工程师简历项目经验怎么写?(转载)
  10. DHTMLX Suite 7.1.10 Crack
  11. 关于微信小程序的navigator标签
  12. GIS应用技巧之数据结构(栅格与矢量)
  13. QuickCHM V2.6
  14. 技术文摘12 yun jia 技术 资料 截图工具 美容
  15. Discriminative Locality Alignment (DLA)
  16. 网络传输介质和常见的设备
  17. 配置OpenWRTnbsp;校园网实现amp;nbsp…
  18. CSV文件编辑器——Modern CSV for mac
  19. 【转载】Python第三方库资源
  20. build_ext --inplace 是什么意思

热门文章

  1. C#语言与面向对象技术(4)
  2. 读懂深度迁移学习,看这文就够了 | 赠书
  3. 做 Java 工程师,挺!好!
  4. 技术驰援抗疫一线, Python 线上峰会免费学!
  5. 《评人工智能如何走向新阶段》后记(再续6)
  6. wxPython:Python首选的GUI库 | CSDN博文精选
  7. Python 3.8即将发布,这几个变化你必须知道
  8. 忽略这一点,人工智能变人工智障!
  9. 75道常见AI面试题,看看你的知识盲点在哪?(附解析)
  10. 同样是AI技术,为什么只有一加6称得上“全速”旗舰?