NeurIPS 2021 近日公布了今年的论文接受情况，收到有效论文投稿 9122 篇，录用论文2371篇，接收率为26%，创9年来历史新高。

作为全球最负盛名的AI学术会议之一，NeurIPS 的学术影响力和论文投稿量逐年攀升，截止今年已收到近万篇论文投稿。与此同时，NeurIPS 的论文评审标准和机制一直存在争议。早在2014 年就有人提出，NeurIPS 的论文评审存在严重的质量问题，而这些问题可能与审稿人的工作量增大有关。 

2014年是机器学习研究领域最为关键的一年，这一年 NeurIPS 接收了多篇突破性研究论文，涉及有监督学习、无监督学习、结构预测多个方向，这些论文为当时的研究提供了理论、算法和实验上的证明，在人工智能领域产生了广泛的影响。 

近日，谷歌研究院与剑桥大学共同发表文章《Inconsistency in Conference Peer Review: Revisiting the 2014 NeurIPS Experiment》，重新评估2014年 NeurIPS 的论文审稿情况，以及同行评议过程存在的不一致性。他们发现：50% 审稿人的评分差异来源于主观因素。

论文链接：https://arxiv.org/abs/2109.09774

Cortes和 Lawrence 是NeurIPS 2014 会议的程序主席，他们分析了 NeurIPS 2014 被接收论文7年来的学术影响力。

实验发现，从2014年至今，如果以引用量为衡量标准，被接收论文的评分和影响力之间没有相关性，而在被拒收的论文之间存在相关性，这表明，NeurIPS 2014 的论文审查更能识别质量较差的论文，但判断高质量论文的能力一般，对此，作者认为审稿流程的不完善是主要原因，但也不排除审稿人主观因素的影响。

内容中包含的图片若涉及版权问题，请及时与我们联系删除