重新启动计算机研究出版系统

2020-12-23 02:53:21

ACM的Moshe Y. Vardi通信,2021年1月,第一卷。 64 No. 1,Page 7 10.1145 / 3437991评论一年前,我提议ACM为其会议制定一项政策变更,要求接受论文的作者可以退出亲自参与,而可以通过视频来代替。 a"小心自己想要的东西,"说一个成语。到2020年3月中旬,由于COVID-19,会议被迫虚拟化。现在很清楚,会议至少将持续到2021年中期(如果不是最后),甚至可能持续到2021年中期。我很高兴这将防止向大气中添加数万吨的CO 2,但会议的虚拟化使我坚信,计算机研究出版系统已严重损坏,需要重新启动。

我们是怎么来到这里的?早在1960年代,期刊就很慢,而期刊领域是新的,需要快速发展。会议提供了一种解决方案:在具有六个月的提交-决定-演示周期的会议中提供初步版本,获得反馈和好评,然后在日记中发布存档版本。那时,计划委员会没有审查论文。他们为该程序选择了论文。

随着时间的流逝,选择过程变成了审查过程:决策通知成为具有一些反馈的决策通知,反馈演变为评论,而评论最终导致了反驳。此外,会议已从最初的发布场所发展为实际上的档案发布场所。此外,会议日程的时间压力导致选择性,从而产生声望。因此,今天的计算机研究会议显然是档案出版的首选场所。

但是会议从来没有被设计成提供高质量档案出版的场所,因为它们缺乏适当的编辑过程,其基本要素是反复改进。在审稿人和编辑满意之前,已发表的期刊论文经历两个甚至三个版本的情况并不少见。进行实验审查的会议,例如NIPS 2014 b和ESA 2018,c得出结论认为会议编辑决定中存在很大的随机性。 "同行评审过程的声誉受损,"汉娜·巴斯总结道。实际上,计算机研究领域的每个人都对" reviewers"但是评论者就是我们!如果每个人都不满意,那么这个问题一定是系统性的。

支持会议的最有力的论据是就提交和决策时间而言的可预测性,以及它们作为社区建设场所的功能。但是承诺的可预测性是一种幻想,因为论文在各个会议之间不断涌现,直到他们最终找到家为止。当每篇论文都必须在会议上发表时,大多数研究人员都参加了会议,而20至30年前,他们提供了一个真正具有代表性的社区样本,初级和高级研究人员混合了。

对损失的自然反应是重建熟悉的事物。当会议是在旅馆里开会的日记时,空间限制迫使时间受到限制,因此会议通常需要2到4天。我们将这种传统保留在虚拟会议中,尽管最初的原因已经消失了,但虚拟会议仍会召开2-4天。但是,如果我们在过去的几个月中学到了什么,那就是在虚拟空间中度过一天是非常困难的,而屏幕疲劳确实是一种现象。然而,尽管我们都渴望COVID-19结束,但气候变化威胁正日益凸显,我怀疑虚拟会议仍将继续存在。

因此,我们似乎陷入了功能失调,过时的发布系统。现在该结束有关期刊和会议的辩论了。让我们设计一个新的发布系统,作为计算机专业人士,我们应该知道该怎么做。我们应该收集系统需求,设计系统,实现原型,进行实验并进行迭代。发布系统是我们的系统。我们负责!技术开辟了新的途径,但我们必须具有想象力,而不受功能失调的过去教条的束缚。

如果我们从COVID-19中学到了什么,那就是应对重大社会挑战需要采取集体行动。 美国具有“坚固的个人主义”传统 在联邦政府的薄弱领导下,对这种大流行的处理能力很差。 但是,采取集体行动正是我们建立专业协会的原因。 他们必须带路。 每个人都希望改变,但没人愿意改变,这是陈词滥调。 让我们共同同意改变。 我们应该拥有一个能够满足科学,科学家和社会需求的出版系统。 让我们重新启动用于计算研究的发布系统。 ACM即将成立ACM会议未来格式总统特别工作组。 这是一个开始! 数字图书馆由计算机协会发布。 版权所有©2021 ACM,Inc.