CMU发布船新「论文评审」Python程序,淘汰人工审核,自动给arXiv打分
晓查 发自 凹非寺
量子位 报道 | 公众号 QbitAI
什么?同行评审已经可以被AI程序取代了?
就在4月1日,CMU提出了最新的评审标准算法——State-Of-the-Art Review,SOAR,同时开源了它的Python程序代码。
SOAR优化了过去同行评审多目标、大规模分布、延迟极高的缺陷。
这篇颠覆现在同行评审制度的论文,已被“国际AI顶会”SIGBOVIK 2020收录。
SIGBOVIK是在每年4月1日举办的学术会议,只有一天的议程,但是接收的论文都是全球顶尖名校和科技巨头的顶级研究。
今年在大会上发表的SOAR智能系统,必将把人工审核机制扫进历史垃圾堆。
其他还靠人工审核论文的AI顶会表示瑟瑟发抖。不过大会评委们倒是很开心,因为以后不必做吃力不赚钱的活了。
船新的论文评分系统
目前同行评审系统存在着无法扩展、运行速度慢、结果不一致的问题。其中,审稿人看稿速度慢是主要问题,另外暴增的博士生数量也不可忽略。
从1990年到2010年,授予博士学位的人数呈指数式增长,但是谷歌搜索收录的论文数量在过去几年中却没有太大变化,即使旋转坐标轴也无法保持上升趋势。
以上证据表明,要么是现在博士的工作效率比其之前都要低,要么是现有的评审系统没有提供足够的能力审核越来越多的论文。
很显然是后者。
因此来自CMU的研究人员提出了SOAR计划。SOAR包含两个重要参数:
1、对文章中的SOTA单词数量进行计数,数字越高越可信。
2、另外就是判断文章新颖性,统计文中novelty这个单词出现的数量。
然后我们就得到了SOAR的计算公式:
计算SOAR分数的代码也很简单,我们可以通过Python 3.7.2的collections.Counter对象传递来实现SOAR算法。
而且,算法实现的成本很低,即使你没有计算机,也可以让研究生通过铅笔划线的方式,手工算出SOAR。
不过第二种算法的难度在于,需要提高研究生的忍耐力,并说服其更好地利用时间,这一点在实验上还未得到验证。
arXiv网站是我们看论文常去的地方。
如果你没有“SOAR人肉计算器”,CMU的研究人员还开发了arXiv的SOAR插件,可以对未经同行评审的论文打分,节省科研工作者的筛选时间。
插件的实际效果如下:
顶会SIGBOVIK真的很“顶”
SIGBOVIK从2007年开始举办,最初由CMU的高级计算机科学家Harry Q. Bovik带头,计算机异端学会组织,今年已是第14届。
SIGBOVIK是一个研究内容相当多元化的计算机顶级学术会议。
过去SIGBOVIK讨论的内容就有:无能专家系统、深空导航、困惑理论、大型多人在线游戏、后悔最少算法、独自编译、人工智障、自然智能等等。
今年的大会可谓一波三折,本来计划3月1日截止投稿,但是一拖再拖,直到3月27日才截止。4月1日就举办了大会。
如此高的审核效率,不得不让人怀疑今年的大会评审是不是就已经用上了SOAR系统。
SIGBOVIK大会今年总共只接受了11篇论文,其中不乏CMU这样的名校,也不乏Google、Yandex等知名科技公司,
广大科研工作认为,在SOAR系统的加持下,SIGBOVIK将会是超越ICLR、CVPR水平的顶会。
以上内容纯属娱乐。????
论文地址:
https://arxiv.org/abs/2003.14415
SIGBOVIK大会首页:
http://sigbovik.org/
会议全程录像:
https://www.youtube.com/watch?v=ClfBtwoHPeg
作者系网易新闻·网易号“各有态度”签约作者
— 完 —
「地平线核心技术系列公开课」第三期报名中。4月3日20:00,地平线应用平台架构师穆黎森,将在线介绍地平线AI Express如何助力算法工程化落地,并剖析其应用案例。
戳下图二维码,即可报名、加入交流群~
直播推荐 | 地平线核心技术解析系列课
学习计划 | 关注AI发展新动态
量子位 QbitAI · 头条号签约作者
վ'ᴗ' ի 追踪AI技术和产品新动态
喜欢就点「在看」吧 !
CMU发布船新「论文评审」Python程序,淘汰人工审核,自动给arXiv打分相关推荐
- 太可了!阿里巴巴发布第一台「云电脑」,程序员再也不怕丢电脑了...
黑马程序员视频库 播妞vx:heimiu526 传智播客旗下互联网资讯.学习资源免费分享平台 在成年人的世界里,崩溃就是一瞬间的事. 说到程序员,那真是太太太太容易崩溃了! 能让程序员崩溃的事儿多了去 ...
- python对excel某一列去重-「总结篇」Python中所有的Excel操作技巧
原标题:「总结篇」Python中所有的Excel操作技巧 Python对于Excel的操作是多种多样的,掌握了相关用法就可以随心所欲的操作数据了! 操作xls文件 xlrd(读操作): import ...
- 懂「互联网语」的程序员,是个狠人。
借用一下时下很火的「互联网语」 做程序员的乐趣 是只有进场的人才能获得的红利 与程序员相处 绝对是令人WOW的用户体验 但是别真信那些个程序员说的话 哪怕有无数江湖传言为他背书 不然你良久建立的心智模 ...
- 「极点日历」小程序插件
上期,我们在<「wxParser」小程序插件>一文中介绍了知晓云团队出品的「wxParser」小程序插件,对其意义.作用以及应用作出了说明.而在此之前,我们还介绍过「腾讯地图」.「腾讯视频 ...
- 论文作者串通抱团、威胁审稿人,ACM Fellow炮轰「同行评审」作弊
来源:机器之心 编辑:陈萍.杜伟 布朗大学计算机科学系教授.机器学习研究者.2018 年 ACM Fellow 迈克尔 · 利特曼(Michael L. Littman)在 ACM 通讯上发文斥责「部 ...
- 这是马?小鹏发布可骑乘「智能马」,四不像长相太奇葩!
来源:知乎 编辑:新智元 [导读]昨日,小鹏发布了全球首款可骑乘智能机器马,定位是「小鹏友」的第一个智慧交通工具.这款机器马的发布却引来了网友的热议,网友表示,小鹏有点剑走偏锋. 要说Spot机器狗, ...
- 极目智能发布首款「全国产化」L2级智能驾驶方案,已获得10余家车企定点
智能驾驶竞争进入深水区,市场开始分层,新的竞争局面开启. 高工智能汽车研究院数据显示,今年1-11月国内L2级ADAS新车搭载上险量为338.51万辆,同比上年同期增长78.33%.预计未来2-3年间 ...
- 一句话就能魔改视频主角,谷歌新「AI导演」惊呆网友:这画质也太赞了
Alex 发自 凹非寺 量子位 | 公众号 QbitAI 谷歌整出了个新"AI导演",一句话甚至能把视频主角给换了. 你看,青青草地上,一只小熊正在跳舞. 难道现在的熊都这么有艺术 ...
- iwcコピー時計の全く新しい「La Musicale」音楽の腕時計
7800 Classique 「La Musicale」音楽の腕時計の初めては見得を切て.発熱して協議を引いて.そして多い名誉を収穫しました. iwcコピー時計この芸術の傑作は特許の音楽装置のそれを搭 ...
最新文章
- html代码闪烁的文字怎么打,HTML最简单的文字闪烁代码
- 读这部IT小说时,我有一种看英雄大片的莫名感动
- POJ1143	Number Game(DP)
- UVa 10118 记忆化搜索 Free Candies
- flink 7-提交任务
- Unity3d--跨平台(一)
- mysql 授权与回收权限_MySQL 操作命令梳理(4)-- grant授权和revoke回收权限
- php 两个符号怎么打,怎么打出圈2符号
- 使用Lock and Load X 插件时导致Final Cat Pro意外退出的解决办法
- C#- XPath教程
- 初级程序员考试大纲 (转)
- 汇编语言子程序设计 查找电话号码
- 墙裂推荐!比Sci-Hub网站更好用的文献下载神器!解决所有文献下载烦恼
- UML建模--用例图
- c语言void delay是什么意思,delay是什么意思(单片机中delay)
- html调用打印机,[Javascript]网页调用打印机
- 第十五周 项目三 归并排序算法的改进
- AutoCAD安装失败
- html表格列表模板,前端基础 - HTML(二) 表格、表单、列表
- 淘宝、百度软件工程师们小调皮,各种霸气外漏
热门文章
- [图解]在输入框和文本框中获取和设置光标位置,以及选中文本和获取选中文本值的方法 --- 详解,兼容所有浏览器。...
- Android开发笔记——常见BUG类型之内存泄露与线程安全
- Traffic Ccontrol(流量控制)
- shell中遍历目录
- Android学习笔记(二三): 多页显示-Flipper的使用
- 电子商务之表示层分析(九)
- JavaScript函数大全
- Metasploit resource命令技巧
- Xamarin Android教程Android基本知识版本介绍与系统介绍
- iOS Sprite Kit教程之编写程序以及Xcode的介绍