問耕 發自 凹非寺
量子位 出品 | 公眾號 QbitAI
一個人工智慧的頂級會議，出現在知乎的熱榜上：「如何看待IJCAI 2019錄用結果？」
△ 來自微博@阿黃真的很嚴格
這個昨天中午創建的話題，昨天晚上被頂上了知乎熱榜，並一直延續到今天上午。
話題中提到的IJCAI，全稱是國際人工智慧聯合會議，是人工智慧領域主要的學術會議之一，也是中國計算機學會推薦的七大A類人工智慧學術會議之一。
昨天，IJCAI 2019論文接收結果發布。本次會議一共收到4752篇有效提交的論文，最終接收數量為850篇，接收率降低到17.9%。
正是隨著結果的發布，引發了一波新的質疑和吐槽。
質疑一：審稿奇葩說？
被質疑最多的就是審稿。
史丹福大學計算機博士後王鴻偉在知乎的回答中說，審稿人對他某篇論文的很高意見就是兩篇參考文獻，第一篇是引用僅有2次、出處不知名的論文，而另一篇……竟然是王鴻偉自己以前發的論文……
「我壓根沒覺得我自己的那篇paper和這一篇是closely similar的」
另一位吐槽的知乎用戶說，「審稿人像打醬油一樣胡話連篇」，質疑審稿人壓根沒有看懂論文，一些基本的概念都不懂，不負責任的胡亂diss一通。一位匿名用戶說：感覺IJCAI找不到懂3D的評審，或者說面對巨大的投稿量，評審數量遠遠不夠。
有人在微博上激烈表示：「本屆IJCAI審稿宇宙最爛！沒有之一！能不能以後要求review不要照抄人家文章，不要就四五行！然後就加一句不痛不癢的話」。
至於審稿為什麼差，有一種觀點是：現在大部分評審都是在學生手中完成的，老師極少參與。知乎用戶@張旭說：希望以後的評審者不要隨便把論文甩給低年級研究生甚至本科生，都是科研工作者，還是互相多一份尊重比較好。
今天早上，清華的劉知遠老師也參與討論了這個話題。劉知遠表示：
感覺今年IJCAI 2019審稿質量控制出了一些問題，除了很多意見只有1-2句話毫無信息量外，很多論文PC的reviews和SPC的meta-review也存在明顯不一致。
按照正常的流程，SPC要對PC給出審稿意見進行評判，領域主席（AC）還要對SPC和PC的審稿意見進行評判。
質疑二：打分飄忽？
除了評審意見，還有很多人曬出了讓人不理解的打分。
比方這種，其他得分還不錯，最後Overall只有3分。
以及這種。
還有沒分的。
質疑三：rebuttal沒用？
對評審意見有質疑，當然要rebuttal反駁解釋一下。
有的是用來回應質疑，還有人甚至用來反diss被質疑不懂行的審稿人：「看到我們回給#5的rebuttal都會看出他是個傻×」。
不過，大部分來吐槽的同學，千言萬語其實都是一句話：rebuttal沒用。
「事實證明，rebuttal沒有什麼用，最後reviewers意見一個沒改。」「如果不看別人的rebuttal, 又有什麼必要弄這個環節浪費別人的精力和時間呢。rebuttal後也沒個反饋。」「最後 rebuttal是真的沒有用，不會有評委看的。。。」
不過……我們在微博上看到有另外一個清華的同學，這次中了IJCAI 2019，他說：
「rebuttal逆風翻盤，真刺激」
質疑四：有貓膩？
當然，更為嚴峻的質疑。
有用戶在微博上說：今天第一次聽說AAAI和IJCAI查reviewer interest conflict，結果找出來90%的高度嫌疑的人都是華人。唉能不能愛惜一下自己的學術名聲啊。
一位匿名知乎用戶在回答中表示：
我理解圈子文化，也理解熟人給高分，但是作為審稿人，能否去客觀公正的評價那些不打招呼人的文章，給點有價值的建議，你們現在這種故意打低分的做法對得起自己做學術的初心嗎？這樣下去，打擊的只有那些真正想憑自己努力做點研究的人，有可能到某個時間點，這個圈子的破事都被抖出來，雖然現在已經是公開的秘密了，到時候也就中國人自己玩吧。
今年3月底，北大的萬小軍老師也曾在微博上提到這個問題，「看來又有一些作者通過搞關係影響論文評審結果，連IJCAI2019主席都特地發郵件提醒大家……不知道這種找關係搞論文的不良風氣是啥時候出現的」。
One More Thing
當然吐槽歸吐槽，有則改之無則加勉。
而且有些問題，並不是某一個頂會獨有，此前也有其他的會議面臨類似的問題。希望這些問題，都能逐步得到修正和改進。
最後，還是要給中了IJCAI 2019的同學和老師們熱烈竹貨~
這屆IJCAI將於8月10-16日，在澳門召開。
在Twitter和reddit上，倒是沒有多少質疑，不過我們看到老外在問，為什麼這麼多贊助商都是中國公司……
— 完 —