摘要
arXiv:2505.04966v1 评审类型: 新作
摘要:随着提交论文数量的大幅增加(每个会场超过10,000篇提交),主要人工智能(AI)会议的同行评审过程面临着前所未有的挑战,同时审查质量以及评审员责任的问题日益引起关注。本文呼吁需要将传统的单向评审系统转变为双向反馈循环,其中作者评估评审质量,评审员获得正式认证,从而建立一个促进可持续、高质量同行评审系统的问责框架。当前的评审系统可以视为作者、评审员和系统(即会议)之间的互动,在这里我们提出所有三方面都应对当前问题负有责任。然而,作者的问题只能通过政策实施和检测工具来解决,伦理问题只能通过自我反思来纠正。因此,本文重点在于通过两种关键机制改革评审员的问责制并系统性地给予奖励:(1)两级双向评审系统,让作者评估评审意见同时尽量减少反报复行为,(2)一个系统的评审员奖励系统,通过激励高质量的评审来提高评审员的积极性。我们恳请社区对这些问题以及所需的改革表现出强烈兴趣,以增强同行评审过程。