我最近向一个会议提交了一篇论文,当我收到评论时,我注意到一位评论者特别要求我拿出实验(在这种情况下,是模拟),我所展示的实验部分是作为动机,部分是为了证明我的结果。不出所料,这次会议是一次盛大的会议理论会议;根据审稿人的说法,这些实验不仅没有必要,而且使论文黯然失色。
杰弗里·厄尔曼的观点通信观察到许多计算机科学领域过度关注实验,以验证他们的工作。我不反对;他提出了几个重要的观点。我自己在几个系统会议的程序委员会工作的经验,以及为这类会议撰写论文的经验是,除了极少的例外,实验是事实上的要求。这种想法认为,除非有实验支持,否则你怎么知道它是否真的是一个好主意?事实上,在某些情况下,甚至模拟也会受到质疑;实验应该在真实的部署系统中进行,因为模拟会过度简化现实世界中发生的事情。正如乌尔曼所指出的,这个框架存在一些漏洞。特别是,我们冒着失去强大想法的风险,因为它们没有落入一个框架中,在这个框架中我们可以自然地围绕它们构建一个系统。
亲爱的迈克尔,我曾经评论过这一点——有人为《科学美国人》选了这篇文章——任何理论的价值都在于预测力量和我们应用它们的能力。
最好的
Igor Schagaev
显示1评论