明敏 發(fā)自 凹非寺
量子位 報道 | 公眾號 QbitAI

剛剛CVPR宣布，將正式禁止論文于審核期間放在社交平臺上討論。

這可讓網友們炸開了鍋，在Reddit上火速引起熱議。

最令人關注的問題莫過于：

還能在arXiv上發(fā)布嗎？

CVPR表示，只禁止在社交平臺上討論，仍舊可以在arXiv上發(fā)布論文。

這讓許多人感到非常迷惑：

如果我在arXiv上發(fā)布了論文，然后其他人在社交平臺上分享了我的論文，這算不算破壞規(guī)則呢？

這禁令的漏洞也太明顯了吧，只要有人存心想鉆空子，那豈不是輕而易舉！

除此之外，禁止在社交媒體上討論，會對論文的傳播造成非常大的影響，這對于學術研究可不是件好事。

基于這些原因，有2位CV研究人員在禁令投票表決期就聯(lián)名發(fā)帖表示反對。

他們認為，這條禁令的提出是為了解決雙盲評審中的偏見現(xiàn)象。

但是禁止在社交平臺上討論，并不能從根本上解決這個問題啊！

看上去這項禁令會對有知名度的人造成影響，但可能真正受害的是那些沒有背景和知名度的研究人員。

而且這個規(guī)則里有很多定義都不明確，也就存在很多漏洞，比如：

• 什么算社交媒體呢？現(xiàn)在有很多人會直播自己的代碼課程，YouTube和Twitch算是社交媒體嗎？
• 如果有其他人在社交媒體上提到了你的論文，你又進行了分享或轉發(fā)，這算是違規(guī)嗎？
• 如果論文被大V介紹，這算違規(guī)嗎？
• 這項規(guī)定將如何執(zhí)行呢？專門團隊負責？如果發(fā)帖后又刪帖，這怎么處理呢？

諸如此類，僅僅是他們兩個人預想到可能會存在的問題。

他們的發(fā)聲得到了Yann LeCun、Yannic Kilcher等人的支持。

LeCun直言：

限制交流會阻礙學術的進步，也違背了道德規(guī)范。CVPR的這項新政策簡直是瘋了。

那么這條禁令真的完全一無是處嗎？

也不盡然。

有網友就生動地描述了雙盲評審中，專家可能被宣傳信息引導的現(xiàn)象。

“嘿！我是著名的研究人員X，我非常高興能夠在社交媒體上公開我的項目，該項目將Widget測量提高了 20%。它正在審查中，但因為它太酷了，而且我是我所在領域的巨頭，我相信它會通過的。”

提交論文的審稿人：“嗯，這篇論文將Widget測量提高了 20%。這是否意味著我正在審閱著名的X論文？我確定他們是正確的，因為他們是該領域的巨頭；因此沒有必要仔細檢查這個。”

也有人認為，CVPR提出這項禁令的初衷是好的，但是他們沒有找到正確的解決辦法。

我們真正關心的是評閱的專家！而不是討論問題的大眾。

在我看來這是一項好的政策，會有一定的改善效果；但另一方面，這也的確是個棘手的難題。

如果因為專家會受到影響，就禁止開展正常的學術討論，這個規(guī)則未免也太“一刀切”了。

而且從實際效果來講，很可能適得其反。

知名的實驗室可能會鉆空子，運用自己的影響力幫助同行相互宣傳；而小實驗室就只能干等評審了。

有人甚至表示：

相比于雙盲評審，我更信任社交媒體上的評審（討論）。

真的公平嗎？

雙盲評審機制是否真的公平，其實是個老生常談的問題了。

此前，GAN的發(fā)明人Ian Goodfellow就曾炮轟同行評審機制，認為是這一制度導致了如今AI會議論文下降。

其中，“評審人員質量參差不齊”是主要原因，浮夸的論文被選中，真正的好論文反而被埋沒。

而且在去年，也有類似的事情在Reddit上引發(fā)過討論。

一位研究人員表示自己的論文在Twitter上被大V分享后，得到了許多人如潮水般的好評，但當時還在論文盲評期。

這在一定程度上破壞了雙盲評審機制，并由此引發(fā)許多人對“社交媒體+arXiv”模式的不滿。

這么看，CVPR似乎還很傾聽大眾的聲音，對評審機制做出了相應的調整。

但是為什么還是有很多人不領情呢？

顯然，大眾對于雙盲評審機制的討論，出發(fā)點都是希望能得到更大的公平。

如果提出來一個新規(guī)則，還是破壞了一部分人的利益，這勢必還是會引起不滿。

因此，想要建立一個更完善的機制，不是靠“一刀切”的政策就能實現(xiàn)的，還需要做更多的優(yōu)化、考慮更多方面。

此前有網友就提出“是否可以在arXiv匿名投稿”這種具體的解決辦法。

對于如何讓雙盲評審更少偏見、更多公平，也還需要作出很多努力。

對此，你有什么看法呢？

歡迎評論區(qū)留言討論~

參考鏈接：
[1]https://www.reddit.com/r/MachineLearning/comments/o9euga/d_cvpr_officially_bans_social_media_discussion/
[2]https://twitter.com/ylecun/status/1409393630310248452
[3]https://amytabb.com/ts/2021-06-16-cvpr-motion-position/
[4]https://www.reddit.com/r/MachineLearning/comments/hbzd5o/d_on_the_public_advertising_of_neurips/