罗杰波|负起责任、审慎对待论文创新和性能指数,ACM Fellow罗杰波教授分享他的审稿经验


北京联盟_本文原题:负起责任、审慎对待论文创新和性能指数 , ACM Fellow罗杰波教授分享他的审稿经验
机器之心整理
参与:杜伟、小舟
近日 , AI 领域诸多顶级学术会议相继召开 , 各类会议期刊的论文的审阅标准也再度成为社区讨论的焦点 。 在本文中 , 美国罗切斯特大学罗杰波教授分享了他自己对如何做好审稿人的一些经验和建议 。
如何客观地审阅 AI 领域的论文 , 以及如何确保审阅出来的论文足够公正并使论文作者没有异议呢?对于这个话题 , 每个研究者想必都有自己的理念和方法 。
在近期举办的视觉与学习青年学者研讨会(VALSE Webinar)上 , IEEE 多媒体汇刊 TMM 总编、CVPR 2012 程序委员会主席、美国罗切斯特大学计算机科学系教授罗杰波分享了《如何做一个 AI 领域审稿人》的主题报告 。
罗杰波|负起责任、审慎对待论文创新和性能指数,ACM Fellow罗杰波教授分享他的审稿经验
本文插图

机器之心对此报告的主要内容进行了整理 。
首先 , 罗杰波教授分析了当前学术会议在审稿方面的一些普遍现象 , 表现在三个方面:
【罗杰波|负起责任、审慎对待论文创新和性能指数,ACM Fellow罗杰波教授分享他的审稿经验】首先 , AI 领域目前正在爆炸性地发展 , 许多会议的论文提交量都接近一万篇 , 因此需要大量的审稿人 。 如果一个会议有 7000 篇提交论文 , 每篇论文需要写 3 个 reviews , 假设每个审稿人平均能够写 7 个 reviews , 那么将需要 3000 个审稿人 。
其次 , 在审稿人需求量剧增的形势下 , 许多新的经验不足的审稿人就加入到这个行列中 , 包括博士生、硕士生、本科生以及其他领域的研究人员 。 这也造成了一些问题 , 比如审稿人缺乏系统的训练 , 往往都是从个人经验中进行 “无监督学习” , 而个人经验(往往是不愉快的论文被拒的经验)与优秀的系统经验相差甚远 。
最后 , 有些研究者对好的 reviews 印象不深 , 对不好的 reviews 却耿耿于怀且如法炮制 。 这就造成了社区中公认的一个问题:冤冤相报何时了 。 而一个领域的健康发展在很大程度上都依赖于高质量的同行评审 。
针对学术会议存在的这些审稿问题 , 罗杰波教授首先列出了一些有经验的研究者 , 并介绍了他们对于 review 质量的见解 。 同时 , 罗杰波教授也给出了他对提高评审质量的建议 , 包括以下六个方面:

  • 己所不欲 , 勿施于人 。
  • 社区是由每一个人组成的 。
  • 寻找接收论文的理由 。
  • 论文写作是很重要的 。
  • 审稿的首要目标是好论文被顶级会议 / 期刊接收 。
  • 如果你不熟悉该领域要怎么办 。
接下来 , 我们具体来看这几方面内容 。
审稿人应负起责任 , 维护社区学术环境
罗杰波教授强调了社区的重要作用 , 指出审稿人应该遵循的一些理念 。
我们都需要保护而不是破坏社区的学术环境 , 因为每个人都身在其中 。 你如何对待别人 , 别人就会如何对待你 。 维护良好的社区氛围需要每一位成员的共同努力 。 对于审稿人来说 , 要及时回复 。 迟交或不交的 review 会伤害所有参与的人 , 当然也包括你自己(因为别人也会如此对待你的论文) 。
另外 , 审稿人要负起责任 。 如果时间和精力允许 , 资深研究人员应该审查学生做的 reviews 。
就论文本身而言 , 审稿人应做到以下两个方面:
其一 , 不要强迫投稿者引用你自己的论文(如果无关的话) 。 请勿遗漏重要的引用资料(不夹带私货 , 但也要杜绝恶意不引用) , 还要指出抄袭 / 重复提交的情况 。
其二 , 不要强迫作者引用未发表的论文(比如 arXiv) , 这是因为未发表的论文没有经过同行评审 。 另外未发表的论文中可能包含一些错误和虚假的信息(有些可能是恶意的 ,比如占坑或误导) 。


推荐阅读