会议论文_AI会议 || 如何rebuttal学术论文?

深度强化学习实验室报道

来源：https://zhuanlan.zhihu.com/p/104298923

作者：魏秀参  编辑：DeepRL

最近，恰逢CVPR 2020 rebuttal之前，本文就rebuttle相关的内容进行总结， 学术论文 是发布自己或团队最新研究进展正式且最快捷的途径，也是和同行交流想法最方便、高效的方式。 当同行评议(Peer review)作为学术成果正式发布的必经之路已运行200余年^[1] 时，用正确的姿势进行review rebuttal便成为提高论文录用机率甚至扭转乾坤的最后一搏。 本文从“ What is peer review ？ ”、“ How to rebuttal ?”及“ Does rebuttal matter? ”三部分来聊聊学术论文(主要针对人工智能领域会议和期刊)rebuttal的那些事。 ||  What is peer review？ 要想写好rebuttal，必然要先了解peer review是怎么一回事。

“Peer review”趣图(原图来自网络)

Peer review是一种学术成果审查程序，即作者的学术著作或proposal被同一领域的其他专家学者评审，并根据评审意见决定是否予以录用(Accept)和后续正式发表(Publish)。对于计算机学科特别是人工智能领域的学术会议和期刊，其均有相对成熟和流程化的同行评议(即审稿)机制。 1.1 【会议审稿】 对于会议审稿流程而言，由于会议论文往往有比较严格的截止日期(Deadline)，作者们通常会根据这一时间来rush自己的paper(关于论文写作的一些tips请戳笔者早年的《LaTeX写作新手须知》)，所谓“Deadline就是第一生产力！”。待deadline一过，大会的程序委员会主席(Program Committee Chair或Program Chair)首先会剔除一批不符合会议投稿政策的论文，如：篇幅不合要求、一稿多投、未匿名、未注明Conflict Domain等，这些论文会直接作“Desk Reject”处理。处理之后的投稿(Submission)便为有效投稿。 这些稿件会由PC Chair根据一定规则(如TPMS ^[2]或bidding ^[3])分配给高级程序委员会委员(Senior PC，IJCAI/AAAI一般是这个叫法)或领域主席(Area Chair，CVPR/ICCV/ECCV一般用此称谓)，这些人便是论文最终命运的判决者，也是在审稿最后时刻书写meta review的meta reviewer——一般会由领域内颇有建树、有判断力的专家学者担任。而后，这些meta reviewer会继续分配稿件给到实际操刀审稿、给出具体审稿意见的审稿人(Reviewer)。对于CVPR/ICCV/ECCV等CV领域会议，近几年每个AC负责的文章大约在30-50篇左右，而普通审稿人分配的稿件一般不超过10篇/人。以CVPR 2019为例，针对5160篇有效投稿，全球共召集了132位AC和2887位审稿人 ^[4]，一共提交了超过15000条审稿意见，做到了平均一篇文章至少3条，其中一篇文章甚至有7条审稿意见之多。 在reviewer各自独立提交审稿意见并经由AC检查质量之后，绝大多数会议会将首轮意见开放给作者(目前Data Mining领域的KDD、ICDM等仍保持不设rebuttal环节的传统)，作者可根据意见内容进行rebuttal来更正审稿人理解的错误、解释/澄清审稿人的疑虑、提供更多方法和实验细节等信息。在收回作者rebuttal之后，同一篇文章的首轮意见、作者rebuttal信息均会开放给所有审稿人和责任AC，进入paper discussion环节。 Discussion时，AC会主持每篇文章的讨论，每位审稿人根据其他审稿人意见和作者rebuttal会留言给其他审稿人。经过几天系统线上讨论，所有审稿人需更新自己最终意见。更新的意见以及整个讨论过程，再加上AC自己的判断会作为AC给予每篇论文生杀予夺的重要依据：若多数审稿人在rebuttal后提高了论文得分或保持accept认为可以接收，则文章有较大概率可被录用；若多数审稿人在rebuttal后降分或保持reject，则这篇文章命运便岌岌可危。可以看到，rebuttal在整个论文录用过程中起到了举足轻重的作用——优秀的rebuttal能力挽狂澜；无力的rebuttal则于事无补甚至会画蛇添足、过犹不及。 特别的，CV领域的会议如CVPR/ICCV/ECCV等在AC给予最终决定时，有开线下AC meeting的传统，即在paper discussion之后会选在某个城市线下召集所有AC共同决定了投稿的最终命运。一般而言，一篇文章是否录用由三位(有时两位)没有conflict domain的AC共同决定，称作“AC Triplet”。到此，每篇会议论文最终结果(录用与否以及oral、post