NeurIPS 2019評審結果已出爐,21%接收率,你的Rebuttal成功了麼

機器之心發表於2019-09-04

今天,著名人工智慧頂會 NeuralPS 2019 終於放出了最終的接收結果,廣大機器學習研究者終於可以鬆一口氣了。

今年的 NeuraPS 大會可謂是備受關注。首先,今年投稿的數量創下了歷史新紀錄,一共提交了 6743 篇有效論文,接受率為 21.17%。其次,除了參會門票要搶,論文投稿也要搶了。

在幾個小時前論文評審結果出爐後,很多提交者和研究者都進行了廣泛的討論。除了個別「直擊靈魂」的質疑外,大家對大部分審稿人、區域主席、程式主席的評審工作還是非常滿意的。即使論文沒有被接收的研究者,也表示從評審中學到了很多。

經過了漫長的 rebuttal 過程後,直到九月份大會論文審稿才告一段落。

堪比春運搶票,NeuralPS 投稿伺服器當機

本次會議可以稱得上是「史上最大」,有上萬的投稿論文。因為沒有預料到這種火爆的情況,大會的伺服器當機了。

在微信群、推特上,人們紛紛吐槽伺服器卡,提交不了論文。

NeurIPS 2019評審結果已出爐,21%接收率,你的Rebuttal成功了麼

甚至連一些專家教授也需要排隊等候論文上傳。

NeurIPS 2019評審結果已出爐,21%接收率,你的Rebuttal成功了麼

加拿大 CIFAR AI 主席、多倫多大學助理教授 Daniel Roy 也在「排隊等待」的行列之中。

有研究者表示:當時給 NeurIPS 投論文就像在買最火的籃球鞋:你需要先存好信用卡號,設定自動填寫表單,然後讓自己的電腦實體地址儘可能地靠近 NeurIPS 的伺服器地址。

評審結果,你怎麼看?

對於最終的接收結果和評審意見,研究者是非常關注的。以前很多研究者表示有的頂會評審意見不專業,或者說沒包含什麼資訊量。但對於 NeuralPS 2019 的評審結果,目前大部分研究者都還是心服口服的,不論是被拒還是被接收。

如下是接收結果的告知信:

NeurIPS 2019評審結果已出爐,21%接收率,你的Rebuttal成功了麼

我們可以看到,大會一共提交了 6743 篇論文,其中 1428 篇被接收為會議論文,接受率達到了 21.17%。在接收論文中,還有 36 篇 Oral 論文和 164 篇 Spotlight 論文,估計獲獎論文就會從裡面產生了。

rebuttal 真的有效

從研究者的評論來看,rebuttal 是提高論文被接收機率的優秀方法。rebuttal 是一個論文評審的流程,如果投稿人對審稿結果不滿意,可以透過撰寫 rebuttal 的方式進行反駁和回應。這樣可以幫助審稿人理清論文中的論述和事實誤解,消除對論文存在的問題的疑慮。

本次大會審稿結果出爐後,大會為投稿人留出了 5 天時間(7 月 25 日到 7 月 30 日),用於回應審稿人的質疑等。有些論文獲得了 7-7-5 這樣的評分時,可以透過 rebuttal 的方式,有可能能將結果提升到 7-7-6,從而獲得接收。

NeurIPS 2019評審結果已出爐,21%接收率,你的Rebuttal成功了麼

這位作者的論文就透過這樣的方式「過關」了。

NeurIPS 2019評審結果已出爐,21%接收率,你的Rebuttal成功了麼

當然,也有些不太走運的情況,有時候分數反而可能會降低。

一些吐槽

任何事情都會有爭議,部分審稿人的評論也獲得了喜聞樂見的吐槽。

比如說,一些審稿人發出了疑問:

你文章裡標點為什麼用那麼多?很難讀啊,我建議你把它修改一下。

當然,其中還有更加直擊靈魂的追問:

What is ResNet?

不過,這也有可能是因為論文並沒有在「Related Work」中具體闡述這些雖然簡單,但實際上需要非常熟悉的知識點,因此審稿人擔心作者並沒有完全理解,因此提出了這樣的問題,而不是審稿人本身不懂。機器之心在編譯論文中,確實發現有些論文在引用中會事無鉅細地介紹相關的工作。因此也可以理解審稿人煞費苦心發出的靈魂追問。

一稿多投?小心為上

之前據機器之心報導,為了保證 NeurIPS 大會的內容具有原創性和新穎性,本次大會開始限制一稿多投的情況。之前就有 19 篇論文因這一問題被直接拒稿。

大會曾表示:

針對這種情況,我們已經與 BMVC、ECML-PKDD、EMNLP-IJCNLP 以及 ICCV 的程式委員會主席展開合作。我們的流程管理人員執行相應指令碼,對提交至 NeurIPS 的論文與這些學術會議上同一作者提交的論文進行對比。然後,我們檢查了相似度最高的論文,確定它們是否違反了雙重提交政策。

透過以上操作,我們發現並確定提交至 NeurIPS 的 19 篇論文與同一作者提交至不同學術會議的其他論文存在明顯重複。因此,我們現在已經拒絕接收這 19 篇論文。我們還識別出了一些疑似出現重複的論文,並指定領域主席進行仔細調查,以幫助我們確定一個公平的解決方案。

有些作者可能想同時投個別的頂會保底?恐怕是不行的了。其他幾個大會也和 NeuralPS 合作,聯合審查投稿論文中是否有同時重複投稿的情況。


最後,機器之心祝賀所有論文被接收的作者們,也希望更多的讀者能瞭解到這些優秀的研究工作。所以,作者大神們,機器之心也非常歡迎論文解讀的投稿啊。。

參考連結:

  • https://www.reddit.com/r/MachineLearning/comments/cz6rdk/d_neurips_2019_decisions_are_out/

  • https://www.zhihu.com/question/344260878

相關文章