作为计算机视觉领域三大会议之一的 ICCV(IEEE International Conference on Computer Vision)每年都会吸引众多 AI 钻研人员参会。在谷歌的学术指标榜单 Scholar Metrics 上,ICCV 目前名列总榜第 29 位,是计算机视觉领域排名第二的大会。
ICCV 2021 原定的主办地点是加拿大蒙特利尔,由于疫情的关系已改为线上举行,时间定为 10 月 11 到 17 日。
6 月 11 日,参加 ICCV 2021 的同学们纷纷收到了论文评审结果。
虽然比计划日期延迟了一天,目前投稿的作者们已经可以看到结果,着手写 rebuttal 了,Deadline 是 6 月 17 日晚 24 点(美国西海岸时间,UTC-7)。
根据大会统计的数据,今年的 ICCV 接收到了 6236 篇论文有效投稿,在首轮 desk rejects 之后还有 6152 篇。最终在 6 月 11 日,这些论文收到了 20195 个评审反应,其中 4501 篇论文收到了 3 条反应,1575 篇收到了 4 条反应,还有两篇论文集齐了 7 个审稿定见,一篇论文收到了多达 8 个审稿定见。
大会官方表示,今年的论文评审过程中出现了 4129 名审稿人,其中包括仅审 1 篇论文的「紧急审稿人」,以及完成 9 篇审稿的资深人士。还有 233 名区域主席负责审查审稿评价的实质和完整性。
虽然已经有所准备,但在结果刚放出后微软的 CMT 系统仍然无法承受如此多的实质推送宣告宕机。
和以往的 AI 顶会一样,在评审结果出炉的第一时间,人们纷纷开始对自己的结果展开谈论。有很多人在抱怨遭遇不公:
「审稿人认为论文 X 和 Y 已经使用了我提出的方法,但课题在于我就是论文 X 和 Y 的第一作者,我怎么不知道?这就有点摸不着头脑了。」
当然也有对于考官打分感到满意的:
「这可比 CVPR 的评审好多了,这是我收到的最认真细致的反应,所以是时候写一篇强力的反驳出来了。」
是的,对于投稿人来说,接下来最重要的事情就是好好写 rebuttal 了。
这里有一份关于 rebuttal 写作方法的攻略,有需要的同学可以自取,但请记住一个总的原则:rebuttal 的实质要让审稿人或 RAC 间接、透彻、轻松地理解你所供给的答案。
写好 Rebuttal 的 18 条发起
首先我们明确 rebuttal 的目标:
1. 面向审稿人:澄清疑问、回答课题、纠正误解、反驳错误描述,努力整合反应并改进工作本身。
2. 面向 RAC:让他们相信你已经做出了努力,供给一份审稿总结,协助他们了解审稿人的担忧是否得到了解决,还可以反对恶意审查,最终协助 RAC 做出决定。
发起 1: 从积极评价写起
供给一个对于审稿定见的总结,首先突出审稿人的积极评价。rebuttal 的其余部分则主要集中回应消极方面,别让 RAC 在这个过程中忘了钻研的长处。
发起 2:顺序很重要
先写那些比较好回答的课题,再写不太明确和次要的课题。
发起 3:间接恢复审稿人的课题
简洁、完整地援用审稿人的课题或关注的核心。在表达自己的观点之前,先间接回应课题,再给出细节、描述背景或解释你的立场。可以深入解释,但需要先给出 Yes、No 或者 Not quite。
「是否在现实环境中从事评价?」
「我们不同意课题的前提。虽然这些环境是模拟的,但它们非常逼真。」
「为什么不与 GMAP 从事比较?」
「GMAP 在我们的环境中成本比较高。我们的环境有……」
发起 4:口语化
如下图所示,实质风格是相对口语化的,这样更容易理解,也不会被认为有明显的对立气场。
发起 5:回应课题的核心指向
不要纠结于讨论援用的关注点,主要解决审稿定见的指向课题。例如「你为什么不对 GLORP3 从事评价?」通常这个意思是质疑你的试验,回答课题,然后指出你已经对 X、Y 和 Z 从事了评价,这应该就足够了。请细致,提醒其他 RAC 你从事了广泛的试验评价很有用,否则他们乍一看审稿人的谈论,可能会留下错误的印象。
发起 6:不要害怕强调某一点
「表 4 中的第 2 行正好说明了这一点。」「我们在测试时不需要 human-in-the-loop。」 请细致,类似这样的许多恢复不仅间接,而且还能突出重点。
发起 7:主动创造条件
如果所有审稿人似乎都错过了一个中心点,那么对主要观点从事简明扼要的回顾会有所协助。
发起 8:保持完备性
你需要假设 RAC 不太记得你的论文,并且估计也不会再详细阅读它了。你可以重新介绍一下那些首字母缩略词,提醒他们试验设置的相关细节。请细致,即使你不熟悉这些论文(并且在某些情况下,名称和详细信息都是编造的),这种操作可能仍有意义。
发起 9:如果论文本就包含所需细节,请申明
也就是说,如果审稿人想要的实质已经在论文中,请说出来,给出行 / 表 / 图的编号。援用论文实质是为了向所有 RAC 赢得信任:钻研本身并不缺少重要细节(倒不一定要让 RAC 回去查看论文)。
发起 10:整理共同的关注点
如果多个审稿人提了相关的课题,可以一起恢复,从而节约空间。
发起 11:彩色代码
细致上图中彩色代码标注审稿人的小技巧,让对应的审稿人尽可能轻松地发现与其相关的恢复——即使实质是合并的或者未按审稿人的顺序排列。
发起 12:数据胜于雄辩
与其和 RAC 争论,不如向他们供给统计数据来支撑观点,或者用额外的试验结果来回应他们的担忧(如果条件允许)。每次发现自己与审稿人有不同的定见,问问自己是否可以用数据来证明这一点,因为这样可以供给直观的论据。
发起 13:别光承诺,要做到
不要在说「We will discuss Singh et al. in the paper.」,而是间接在 rebuttal 说明白;不要说「We will explain what D_{RT} stands for in the paper」,而是在 rebuttal 中解释它代表什么。补充一点,如果你表示将会把这些添加到论文中,RAC 会更容易相信你。
发起 14:善于倾听,通情达理
大多数 RAC 都会欣赏这一点。
同样地,与其争论为什么审稿人的发起行不通,不如尝试一下,也许会行得通。
发起 15:坦白吧
审稿人表示要从事额外的试验,但条件不允许?那就如实告知。他们询问有关趋势的判断,但你没有任何判断?那就间接说你思考过,但没有什么好的想法,之后会继续钻研。没有足够的 GPU 算力来运行他们要求的试验?也可以坦白说出来。
发起 16:关注审稿人的不诚信行为
在某些情况下,审稿人可能没有认真对待自己的角色。确保其他 RAC 意识到这一点,并适当地减少这些审稿人谈论的影响程度。指出不合理或未经证实的谈论,参考其他定见相左的审稿人谈论,都会有所协助,此外还可以包括向 AC 提交未公开的谈论。
发起 17:正视审稿人的付出
另一方面,如果审稿人给出了了建设性定见、错别字列表、相关钻研指导、关于未来工作的思考,都要表示感谢。至少写一个简短的介绍,表达自己的谢意。
发起 18:审稿人也是人,这一点不能忽略
请记住,这不仅是科研,而且是与其他人的社交互动。因此,请决定你是否想坚持争辩,冒着让审稿人采取强硬立场的风险?还是说努力寻找一个共同点?
希望大家最终都能获得满意的结果。
参考链接:https://deviparikh.medium.com/how-we-write-rebuttals-dc84742fece1