ICLR 2021 正式放榜！接收率29%、高分论文被拒、评审遭质疑...

作者 | 陈大鑫

ICLR 2021今日正式放榜！ 首先恭喜所有论文被接收录用的作者！

本次ICLR 2021一共有2997篇有效论文投稿，最后一共 860 篇被接收，录取率达到了 28.7% ，相比去年的26.5%有提升，与其他一些AI顶会大幅降低接收率相比，ICLR 似乎显得更加友好。

被接收论文中有53篇论文被接收为 Oral（录取率仅为6% ）、114篇论文被接收为Spotlight、693篇论文被接收为Poster。

值得一提的是本次ICLR 2021一共有3013篇论文提交，其中有856篇论文是来自NeurIPS 2020 Rejection 之后重新提交的。

以下是本次ICLR 2021提交论文关键词的词云图：

以下是论文被接收的通知邮件，大家快来下滑翻一翻沾沾喜气！

1

ICLR介绍

ICLR，全称为International Conference on Learning Representations（国际学习表征会议），2013年由两位深度学习大牛、图灵奖得主 Yoshua Bengio 和 Yann LeCun牵头创办。 ICLR成立至今仅七年，但它已被学术研究者们广泛认可，被认为是“深度学习领域的顶级会议”。

在ICLR论文结果公布之际，LeCun在推特上感慨道：

“ICLR的h5指数为203，在所有科学出版物中排名第17，超过了NeurIPS、ICCV和ICML（在AI顶会中仅落后于CVPR，该榜单的前三名是 Nature、新英格兰医学杂志和 Science。）。在过去五年中有203篇论文获得了超过203个引用，这对于一个从2013年才开始的会议来说，取得的成绩可谓是令人惊叹”。

另外 ICLR 采用开放评审（Open Review ）机制。所有提交的论文都会公开，并且接受所有同行的评审及提问，任何学者都可或匿名或实名地评价论文。而在初审公开之后，论文作者也能够对论文进行调整和修改以及进行Rebuttal。

ICLR 2021官方已做出表示， 2021年5月4日-8日会议将 线上召开 。

2

被接收论文数据统计

在论文放榜之后，又是辣个男人，Criteo AI Lab机器学习研究科学家Sergey Ivanov，他又一次火速爬取了ICLR 2021全部的被接收录用的论文：

文档链接：https://docs.google.com/spreadsheets/d/1n58O0lgGI5kI0QQY9f4BDDpNB4oFjb5D51yMr9fHAK4/edit#gid=1546418007

Sergey Ivanov也制作了论文可视化统计图，如下所示，可以看出全部论文的平均得分大概是符合正态分布的。

Sergey Ivanov之后又把论文接收等级情况做了可视化，发现论文是否被录用以及被接收为Oral、Spotlight、Poster的等级程度在整体上是符合分数高低排序的，即得分越高越容易被接收，以及被接收的等级越高。

据数据统计：

1、有超过72%（1936篇）的论文评审分数没有任何变化！

2、论文平均得分在7分以上的103篇论文全部都被接收。

3、平均得分为7分的论文一共有109篇，其中有两篇被拒绝，这表示就算论文平均分达到了7分也不意味着百分百被录取。

4、论 文平均得分在6分以下的论文足足有95篇左右的论文被接收！

5、论文平均分在5分以下基本算是可以放弃治疗了，平均分在5分以下一共有700篇论文，其中只有5篇被接收。

6、被接收的论文最低平均分是4.67（分别是6,4,4）。

7、被接收的860篇论文整体的平均得分为7.25。

8、平均得分为6分的论文有39%的机会被接收，而平均得分为6.5的论文被接收的概率大大增加，达到了91% ！

3

评审质量受到质疑

首先双盲评审有多盲？

Sergey Ivanov指出：

对NeurIPS 2020来说，在9298份提交的论文中，已有2313篇论文发在arXiv上，占所有提交论文的25％。

相比之下，ICLR 2021有557篇论文发在arXiv上，占所有提交论文的25％。

之后Sergey Ivanov简单的指出了有得分为7,8,6和6,8,6,8的论文被拒绝，而得分为4,6,4的论文被幸运接收。

Facebook AI科学家田渊栋表示他参与的一篇得分9,8,7,5,4的论文不幸被拒绝了。

“AC忽视了好的评审，反而抱怨我们选择了一些表面上相似的方法来研究。

论文链接： https://openreview.net/forum?id=_ptUyYP19mP

田渊栋随后又说道，他们的另一篇得分为8,7,6,5,3的论文也被拒绝了，似乎AC只信任给了3分的评审，而忽略了后续的一些讨论（一些评审后来意识到有些针对论文的批评是完全错误的，更不用说后来检查修订删除了一个主要的假设）。

“ 今年元评审（meta-review）质量降低了吗 ？”田渊栋之后发问？  

牛津大学机器学习副教授、应用和理论机器组（OATML）负责人Yarin表示：

是否好奇想看看一篇得分8,8,6,4的论文被ICLR 2021拒绝是什么样的？（哪怕被拒也不妨搞些PR宣传（手动狗头） ）

这里介绍我们在信息瓶颈的可处理目标方面的工作！我们提出了IB边界，它可以扩展到ImageNet并且非常容易实现。

论文链接： https://openreview.net/forum?id=5rc0K0ezhqI

AI研究员RogerGrosse也表示他们有一篇得分8,7,7,6的论文在经过了全面的评审和大量的讨论仍被拒绝了，拒绝的理由用一句话来说就是：“在数据上的训练是向算法灌输知识的错误方式—— 感觉像是AAAI 1993中的旧东西 。

而谷歌大脑的一位研究科学家 Hardmaru则以身作则，对此次评审过程解释道：

作为本次ICLR 2021的一位领域主席，我尝试花费更多的时间来撰写相对复杂详细的评审回复，以给被拒绝的论文更多的反馈，同时给被能接收的论文相对较短的评审回复。

4

论文被接收的喜悦

最后，做研究和写论文终究是个辛苦的差事，需要默默付出很多汗水，论文能被接收殊为不易，当然要值得祝贺一番。

谷歌大脑机器学习科学家Hannie Sedghi表示很开心很激动。

机器学习研究员Balcilar在得知自己的论文被ICLR 2021录取之后甚至表示：“在我四十岁之后，我总是问自己我这一生中最大的成就是什么，我之前的答案是是在被独裁者监禁之前逃离我的国家。现在是时候改变我的答案了！

AI科技评论在这里也祝所有AI人不忘初心、不骄不躁、继续砥砺前行！

---

[赠书福利]

食物、能源、水的短缺是人类面对的终极挑战。人工智能技术是我们面对这些挑战强有力的武器。最前沿的发展如何？我们如何突破困境？腾讯首席探索官网大为最新力作《重构地球：AI FOR FEW》，马化腾力荐！

AI科技评论为大家带来5本《重构地球：AI FOR FEW》正版新书。

在1月13日末条文章（注意不是本文！）《赠书福利！腾讯x先生论AI如何解决全球吃饭难题，马化腾力荐》留言区畅所欲言，谈一谈你对本书的看法。

AI 科技评论将会在留言区选出 5 名读者，每人送出《重构地球：AI FOR FEW》一本。

点击阅读原文，直达IJCAI小组！

由于微信公众号试行乱序推送，您可能不再能准时收到AI科技评论的推送。为了第一时间收到AI科技评论的报道， 请将“AI科技评论”设为星标账号，以及常点文末右下角的“在看”。