文 | Sheryc_王苏

最近,如果你的小伙伴突然没时间陪你出来玩了,请不要担心,ta可能正在与ICML/IJCAI/ACL的审稿人斗智斗勇。

过去的一周里,机器学习顶会ICML、人工智能顶会IJCAI和NLP顶会ACL扎堆放出审稿人意见,有人欢喜有人愁。不过,虽然作者们在rebuttal页面上有回复的字数限制,但推特和reddit上对审稿人的吐槽可不算字数。不来一起看看今年的迷惑审稿人大赏么?

举例说明型

1

第一份paper,给火箭画了张草图:不行,设计的东西不像鸟一样有翅膀,实验结果也没有,reject。

第二份paper,根据草图用通心粉造了个模型:不行,只是在草图基础上平凡的小改进,也没有实验,reject。

第三份paper,根据模型造了个真火箭:不行,只是在模型基础上的小改进,而且没有在空间站做实验,reject。对了,和深度学习也没关系,strong reject。

反面教材型

2

x就是个写paper的,他懂什么自己的论文!没有人比我更懂x的论文!

3

作者和审稿人里总有一个是错的,做好觉悟吧!

4

去年当作反面教材的今年还是会出现,果然人类从历史中学到的唯一教训,就是人类无法从历史中学到任何教训。

意见矛盾型

5

总结:这篇论文的工作处在新颖与不新颖的叠加态中。

6

这篇论文的创新点我在读到这篇论文的时候也想到了!所以不算创新!

7

对相关问题有重大贡献,不错,拒。

8

审稿人:rebuttal前“我怎么可能错呢!(自信)” rebuttal后“嘤嘤嘤让我重新组织一下语言quq”(虽然是去年的但实在是反差萌)

审稿日常型

9

审稿人评分的信息熵高说明评审意见传递的信息量大,好像也不是什么坏事(划掉)

10

如果像前几年的其他会一样有长文转短文就好了,结果长文转短文,短文还是短文。

11

一个说新颖又有趣,一个说在已有方法基础上创新性不大,一个说自己早就做过了,你们三个怎么回事?(不过说新颖又有趣的最后也只给了borderline分)

苦中作乐型

12

审稿结果出来:我就笑笑,我不说话。

13

开始写rebuttal:网上的猫猫图是支持我写下去的最大动力。

14

rebuttal写到一半:无 力 反 击

15

仔细思考:算了,放弃挣扎了,转投了。

真诚建议型

16

虽然感觉这个把rebuttal改为电话会议的方式很新颖,但仔细一想,这不就是论文答辩嘛。

写在最后

以上内容纯属整活,不过对于目前越来越火爆的机器学习领域,如何应对快速增长的投稿量一直是让主办方和研究者头疼的问题。为了解决这个问题,有研究者提出了能自动审阅论文的审稿系统,有主办方提出了基于论文摘要的summary reject(例如IJCAI),但一直都没有得出一个令大家十分满意的方案。

不过,改变可能就此开始:近两天,有学者针对“如何改进大型会议的审稿模式”在推特上分享了一个人人可编辑的谷歌文档链接,邀请大家集思广益。目前该文档已经收集了来自世界各地研究者的超过17条审稿模式改进建议,如果你也有什么好想法或者意见的话,可以在里面补充一下,说不定今后各大顶会的审稿模式就能因为你的建议而改变(=・ω・=)

文档链接:
https://docs.google.com/document/d/1j7Mn2ZkquSzWJ_EzxdXBP3z_JQtrSeUa-CQ0gotAuYw/edit

在最后的最后,祝各位投ICML/ACL/IJCAI的小伙伴都能有个好的结果鸭!(=・ω・=)

萌屋作者:Sheryc_王苏

北航高等理工学院CS专业的市优秀毕业生,蒙特利尔大学/MILA博士生,资深ACG宅,目前作为实习生在腾讯天衍实验室进行NLP研究。虽主攻NLP,却对一切向更完善的智能迈进的系统和方向充满好奇。如果有一天N宝能真正理解我的文字,这个世界应该会被卖萌占领吧。(还没发过东西的)知乎ID:Sheryc

作品推荐:

  1. NLP未来,路在何方?12位巨佬联名指路!

  2. 这几个模型不讲“模德”,我劝它们耗子尾汁

后台回复关键词【入群

加入卖萌屋NLP/IR/Rec与求职讨论群

后台回复关键词【顶会

获取ACL、CIKM等各大顶会论文集!

无内鬼,来点ICML/ACL审稿人笑话相关推荐

  1. 【科研论文】审稿人的回复技巧

    鄙人第一次写论文,大修论文,为此需要进行对应的给审稿人的回复信,于是查阅别人的回复心得,并书写记录如下 总之,作为一个争论,既要有理有据,又要客客气气,有礼貌的进行讨论.并且牢记便利审稿人,对你百利而 ...

  2. ICLR 2020被爆半数审稿人无相关领域经验,同行评审制度在垮塌?

    作者 | 若名 出品 | AI科技大本营(ID:rgznai100) 根据维基百科,同行评议(peer review),是指由一个或多个具有与作品生产者具有相似能力的人员(同行)对作品进行的评估活动. ...

  3. 论文审稿人可以下岗了?CMU都做出论文审稿机器人了!

    文 | Sheryc_王苏 机器学习真是越来越火了,这从各大会议逐年增加的投稿量上就可见一斑:AAAI'21收到了9034篇投稿,NeurIPS'20收到了9467篇投稿,一篇投稿至少要经过3位审稿人 ...

  4. 投稿人就是AI顶会最好的「审稿人」!中国学者提出同行评审新机制

    点击上方"视学算法",选择加"星标"或"置顶" 重磅干货,第一时间送达 来源丨新智元 编辑丨极市平台 导读 近年来,机器学习顶会论文数目井喷 ...

  5. 你就是你自己paper最好的审稿人:宾大苏炜杰提出peer review新机制

    [专栏:前沿进展]近年来,机器学习顶会论文数目井喷,审稿压力巨大,其同行评审制度备受质疑.宾大教授针对此挑战提出了由论文作者协助的新型同行评审机制. 你是否已经受够了NeurIPS,ICLR,ICML ...

  6. 学术圈要炸锅:论文作者和审稿人串通欺骗盲审,ACM Fellow发文痛斥!顶会“想中就中”...

    作者 | 琰琰.维克多 近日,ACM Fellow.美国里普罗维登斯布朗大学计算机科学卓越教学的罗伊斯家族教授迈克尔·利特曼(Michael L. Littman)在ACM通讯上发文,痛斥部分学者威胁 ...

  7. 顶会「扩招」,一地鸡毛:ICLR2020近半数审稿人未发过相关论文

    机器之心报道 机器之心编辑部 昨日,ICLR 2020 评审结果放出,被大量作者吐槽,甚至有开发者统计,本次大会近半数审稿人没有在相关领域发过论文.这把不久之前刚被清华列为人工智能 A 类顶会的 IC ...

  8. 论文作者串通抱团、威胁审稿人,ACM Fellow炮轰「同行评审」作弊

    来源:机器之心 编辑:陈萍.杜伟 布朗大学计算机科学系教授.机器学习研究者.2018 年 ACM Fellow 迈克尔 · 利特曼(Michael L. Littman)在 ACM 通讯上发文斥责「部 ...

  9. 推翻Hinton NeurIPS论文结论!审稿人评价:该文章在标签平滑和知识蒸馏的关系上取得了重大突破!...

    今天给大家介绍一篇 ICLR 2021 的文章,来自卡耐基梅隆大学,香港科技大学,北京大学和马萨诸塞大学阿默斯特分校(是 MEAL 系列作者的一篇最新力作). 论文标题: Is Label Smoot ...

最新文章

  1. [JAVA EE] 拦截器
  2. MySQL在登陆时出现ERROR 1045 (28000): Access denied for user 'root'@'localhost' (using password: YES)错误...
  3. Linux安装Zookeeper3.6.1
  4. mybatis配置文件解析错误解决方法
  5. linux线程基础篇----线程同步与互斥
  6. 求1~n这n个整数十进制表示中1出现的次数
  7. OpenShift 4之实现一个基于Gogs+Nexus+Sonarqube的Jenkins CI/CD Pipeline
  8. es6调用c语言sdk,ES6 关于对象的扩展-contracts-WinFrom控件库|.net开源控件库|HZHControls官网...
  9. 未来手机、电脑和网络将整合为一块
  10. 【医学图像分割】基于matlab磁共振成像 (MRI) 数值模拟平台【含Matlab源码 826期】
  11. 生产环境下戴尔 R820 kvm虚拟化部署二(物理主机系统优化)
  12. 声卡驱动正常但就是没有声音,驱动人生解决方案
  13. MS Office/Visio 2003 sp1 下载
  14. 医院绩效考核和奖金分配方案
  15. matlab lu分解 源代码,矩阵的LU分解(Matlab程序)
  16. uploadify文件上传插件使用教程
  17. 缓解眼睛疲劳的一些解决方案
  18. ERROR! MySQL is not running, but PID file exists
  19. 2017北京区域赛 G - Liaoning Ship’s Voyage【计算几何+bfs】
  20. Java实现 LeetCode 275 H指数 II

热门文章

  1. 关于一些html和css2的知识点
  2. 对一个 复杂的json结果进行取值的例子
  3. 基于Silverlight+WCF的SAAS开发平台TAP(二)之核心技术
  4. 02. Creating a Web Forms User Interface
  5. 做梦也想有一个这样的实验室
  6. 如何把Linux工具里的“军刀”BusyBox移植到RT-Thread Smart?
  7. fprintf/fscanf函数分析
  8. unity怎么制作云飘动_Unity 如何制作星空粒子效果?
  9. 经纬度坐标系转东北天_大地坐标系(WGS-84)、地心地固坐标系(ECEF)与东北天坐标系(ENU)的相互转换C语言代码分享...
  10. 【Pytorch神经网络理论篇】 11 卷积网络模型+Sobel算子原理