AAAI 2021獨家爆料!錄取率21%、Oral取消、評審出現Bug、Reddit上驚現楊超越...

2021-02-20 AI科技評論

作者 | 耳洞打三金

終於!在近萬人的翹首企盼下,AAAI 2021論文錄取結果在昨天傍晚(北京時間)公布:本次AAAI 2021一共收到9034篇論文提交,其中有效審稿的只有7911篇,最終錄取的數量為1692篇,接收率為21.4%。

圖1:AAAI 2021錄取郵件通知

AAAI 2021整體介紹

AAAI 的英文全稱是 Association for the Advance of Artificial Intelligence——美國人工智慧協會。該協會是人工智慧領域的主要學術組織之一,其主辦的年會也是人工智慧領域的國際頂級會議。在中國計算機學會的國際學術會議排名以及清華大學新發布的計算機科學推薦學術會議和期刊列表中,AAAI 均被列為人工智慧領域的 A 類頂級會議。

2021年的人工智慧頂級會議AAAI 2021(第 35 屆 )將於2月2日-2月9日首個全程線上舉辦。

以下是2010年-2021年十二年來AAAI大會的論文投稿量和接受率的統計圖,可以看出,無論是論文投稿量還是論文接受數量,今年都達到了一個新高,明年衝一衝,論文投稿量估計會破萬。與此同時今年21%的論文接收率並不算低,反而比前兩年有所提高,相比IJCAI 2020百分十幾的錄取率更是高了很多。圖註:AAAI歷年投稿總數、錄取總數和錄取率;圖源:Aminer

大會首次取消Oral評級

不同於以往AI頂會的錄取通知郵件(有Oral、Spotlight等級劃分),如下圖所示:

今年的AAAI 2021錄取郵件通知則是沒有看到oral等級劃分,大家都很好奇為何沒有呢,難道是大會組委會偷懶還沒完成工作,過幾天再發?

對於這一問題,推特上有熱心網友問到了AAAI 2021大會程序主席Kevin:「感覺今年評審標準提高了,今年還會有oral或poster等級的劃分嗎?」

Kevin表示道:「今年沒有等級劃分了,將不會再有差異。」

遺憾的是Kevin沒有說為何取消了orar等評級劃分,但三金這裡大概有以下幾個猜測:

1、疫情原因:都是全程線上舉辦了,何來以往線下Oral的正式感和儀式感?Poster掛到哪裡去?

2、Oral、Spotlight等評級本身就具有主觀性,另外AAAI往年的Oral比例也都不低,且去年AAAI 2020評選的Oral論文質量遭到過吐槽...

3、大會組委會善解人意、審時度勢、勇於創新、破Oral唯、勇做AI頂會新榜樣.

但是,不知道以後全球疫情徹底結束、AI頂會恢復下線後,Oral評級是否還會回來,看官,您覺得呢?

程序主席獨家爆料

大會審稿人情況

據大會程序主席Kevin表示,本次AAAI 2021共有9492位PC成員、606位SPC成員、以及246位領域主席. 

納尼?有9492位程序主席??? 

 ┗|`O′|┛ 嗷~~!仔細分析了下這裡的C應該指的是committee(委員/成員)的意思。

審稿過程不易

Kevin表示:

每篇主track的第二階段的論文都至少收到3篇評審;超過93%的論文獲得4+分。每篇快速track論文都至少收到兩篇新的AAAI評審;超過95%的人獲得3+的評審。根據需要還徵集了其他專家評審,許多論文獲得了5條6條,甚至7條評審。

每篇論文還接受了由SPC,AC或程序主席撰寫的meta-review。四位共同的程序主席獨立審核了每篇論文,並標記了數百篇論文進行深入審核,並在評審偏離AC建議時,去除AC影響,以使論文保持統一的標準。


這也是為什麼我們沒有在當天早些時候做出論文錄用決定的原因:我們花費大量時間單獨查看數千篇論文並處理各種極端情況。我敢肯定,你們中的一些人仍然會不同意錄用結果,但是我們竭盡所能公平對待每篇論文。


論文被接收或拒絕並不完全取決於分數

決定不僅僅取決於分數。我們沒有使用數字臨界值來決定接收或拒絕。被拒絕的第二階段論文的平均分數在2.0到7.0之間,被接受的論文的平均分數在4.5到9.3之間。

Kevin隨即又解釋道:

為什麼分數並不重要?因為討論經常導致審稿人改變主意;在這種情況下,他們經常改變分數。在某些情況下,即使是與多數意見不同,論文也只能基於一位專家意見被接收或拒絕。

Microsoft CM疑似出現技術Bug

在Reddit上也有作者吐槽說Microsoft CMT出現技術問題,

「我們的兩名審稿人(給我們打分5分和2分)聲稱他們沒有看到我們論文的任何附錄或代碼。

但是我們的代碼和附錄顯然已經附上,其他兩位審稿人提到它們(附錄或代碼)的clear&useful(給我們打分9和7)證明了這一點,它們在CMT中也很清晰可見。

這似乎是Microsoft CMT系統的技術問題,這非常不公平地使評審對我們產生了偏見。

如預期的那樣,我們與SPC聯繫..但是他們在這件事上幾乎沒有任何反應。

對於如此規模的會議來說,這真是荒謬,浪費了我們太多時間。」


對此,有網友回覆說這可能不是技術問題,而是UI設計不合理。

納尼?難道是UI設計不合理導致評審看不到附錄或代碼,那好得想辦法和作者、AC溝通反饋下不行嗎?

錄用通知前夜Reddit上驚現楊超越!

目前論文錄用結果已出,幾家歡喜幾家愁,但其實在錄用通知出來之前,搞AI的這群不論是學生還是老師,不論是本科生還是博士生,大都有一顆期待的、焦灼的心,畢竟大神只是少數,如果能中一篇A類頂會還是能開心蠻久的:

心情會突然放鬆,緩解好幾個月的壓力,走路都哼著歌帶著風,一蹦一跳地充滿了自信。再稍微慶祝一下,回家炒上幾個拿手的小菜,叫上三五好友,酌幾杯小酒;追個劇、看個番、逛個街、摟著npy去到電影院看個電影、等到晚上了自然是...接著回到實驗室看論文做實驗?

時間回到一天多前,按照AAAI之前官網的顯示,大會應該在12月1日就應該發送錄取郵件通知,而直到12月2日,大會的另一位程序主席Mausam才在推特上發文稱還要等上幾個小時。

對此,有論文作者表示:「如果有任何延遲請讓我們知道,我好把時間用到別的地方去。」

另外還有網友表示:準備睡覺去了,希望郵件通知能趕到賽博朋克2077之前出來。
隨即有網友回覆說「Hi Man,不要對賽博朋克2077的再次推遲有任何懷疑。」

Reddit上驚現楊超越!

還是在AAAI 2021錄取前夜,有熱心網友在Reddit上題為 「AAAI 2021 Paper Acceptance Result"的一條貼子下驚奇地發現了「Please Chaoyue Yang bless me」的字樣:

隨即就有一位外國網友問到:Chaoyue Yang 是神意思?

「她是中國的一位幸運女神」,有中國網友一本正經的回覆到。

而在這之後,也不知道是中國友人還是外國友人都在帖子上面刷起來了:

Please Bless me!!!+1

Bless+10010

還有網友直呼這是文化輸出!

這樣的事情當然不只是發生在reddit上,在本土的QQ群上,有個AAAI 2021會議投稿450人匿名交流群:

在錄用通知出來之前,這個匿名群裡,大家自然是也要「楊超越」起來:

大家還紛紛發圖道:

三金我在這裡小聲問道一下:那些中稿的,說話還算話嗎?

另外,大家對論文評審難免會有一些吐槽:

雛菊吐槽到審稿人似乎是一位不講武德的69歲老前輩?

百子蓮和長壽花兩朵花抱怨道有在後期冒出新的review,但是不給rebuttal進行反饋:

有一隻爬山虎表示道中了頂會不能出去開會旅遊感到憋屈:

2020年 AAAI 大事件回顧

1、楊強教授擔任國際人工智慧大會AAAI 2021大會主席據南京大學周志華教授今年初消息,微眾銀行首席人工智慧官楊強教授擔任國際人工智慧大會AAAI 2021大會主席。楊強教授的此次任職亦是AAAI大會歷史上第二位大會主席,同時屬華人首次。周志華教授在微博中提到,2020年前AAAI僅設程序委員會主席(Program Committe e chair),沒有大會主席( General chair)。由於近來投稿量劇增,為了使程序委員會主席能把精力集中在稿件學術質量把控上,2020年起才開始設置大會主席。楊強教授是人工智慧業界的國際專家,在學術界和工業界做出了許多貢獻,尤其近些年為中國人工智慧和數據挖掘的發展做出了重要的貢獻。楊強教授是國際人工智慧界「遷移學習」(transfer learning)領域的發起人和帶頭人,同時也是國際「聯邦學習」(Federated Learning)的發起人之一及帶頭人。他於2013年7月當選為AAAI Fellow,這也使他成為第一位獲此殊榮的華人;之後又於2016年5月當選為AAAI執行委員會委員,是首位AAAI華人執委,2017年8月當選為國際人工智慧聯合會(IJCAI)理事會主席,是第一位擔任IJCAI理事會主席的華人科學家。由此可見,擔任 AAAI 2021 大會主席,也是順理成章之事。


2、AAAI頒發第一屆百萬美元松鼠AI獎

2020年9月24日,麻省理工學院教授Regina Barzilay被宣布為AAAI松鼠AI獎的第一位獲得者,獎金100萬美元,該獎項旨在表彰她在癌症診斷和藥物合成方面的工作。11月6日,AAAI和ACM SIGAI聯合發布了首個博士學位論文獎,麻省理工學院博士吳佳俊獲得了2019年AAAI/ACM SIGAI博士論文獎。另外還有兩位博士獲得了runners-Up獎項,分別是畢業於喬治亞理工學院的Aishwarya Agrawal和畢業於愛丁堡大學的董力。AAAI / ACM SIGAI博士學位論文獎由AAAI和ACM SIGAI聯合設立,以表彰和鼓勵人工智慧領域的博士生的出色研究和論文,提名者必須是ACM SIGAI成員和/或AAAI成員。該獎項將每年在AAAI上頒發,獲獎者將被邀請在大會上發表演講。

更多信息請查看「首屆AAAI/ACM SIGAI博士論文獎公布,姚班學霸吳佳俊獲獎」一文。

網址連結:https://www.reddit.com/r/MachineLearning/comments/k3xycd/d_aaai_2021_paper_acceptance_result/

AAAI 2021 論文結果出爐以後,大家接下來就該期待今年各位的論文斬獲大獎吧!

另外如果各位有論文投稿報導需求,歡迎大家按照如下方式給AI科技評論聯繫!

暫時沒有投稿需求也可以先加上之後聯繫本文作者:

交個朋友聊聊天、也歡迎更多吐槽爆料和學術合作!


點擊「閱讀原文」,進入直播間預約,避免錯過精彩分享!

相關焦點

  • AAAI 2021 最「嚴」一屆發榜,1692 篇論文中選,錄取率僅為 21%
    」,已經超過了9000篇,共有1692篇論文被錄取,錄取率為21% ,僅比去年的20.6篇高0.4% 。 同時,華人學者楊強教授是AAAI2021大會主席,包括程序聯合主席等等職位在內,本屆組委會一共出現了四位華人面孔。
  • 錄取率四連降!經歷了評審、放榜雙延期的 ICML 2020,評審質量有變...
    相比去年774篇收錄,3424份提交申請,以及22.6%的接收率,雖然在錄取的「絕對數量」上面有所增長,但是分母的增長,也帶來了錄取率的下降。收錄文章的完整列表,以及論文領域分布尚未在官網放出,所有結果只是給作者單獨發了郵件。不過根據去年論文數量排名前五的公司:谷歌、谷歌大腦、微軟、DeepMind、Facebook,預計今年還是這五個機構相互掰手腕。
  • AAAI2021會議時間紀要
    最近正好臨近aaai2021的註冊開放日,先放上官方地址:https://aaai.org/Conferences/AAAI-21/aaai21call/ ,簡單記一下幾個當前重要時間點和注意事項:會議DATE
  • AAAI2019報告:華人影響力躍升,中國論文錄取率墊底
    由此可見,博弈論與經濟範式、啟發式搜索和認知系統是錄取率最高的三個子領域,而人工計算及眾包、應用、AI和網絡則是錄取率最低的三個子領域。  本屆會議的「MVP」錄取率則與會議整體錄取率基本持平。Track Chair決定,錄取率為19.4%。
  • ICML, KDD, SIGIR論文接受率回顧與2021提交時間一覽
    >Deadline: Tue Feb 02 2021 19:59:59 GMT+0800ICML作為國際機器學習大會在一些學者心中的地位很高,不僅因為它是所謂的頂會,更因為它在論文評審方面所做的一些開創性的工作
  • 傅菁爆料楊超越明年買房,而一旁yamy的表情亮了
    楊超越出身自江蘇鹽城的農村,自幼和父親一起生活。 近日火箭少女101在接受採訪時傅菁被主持人問到買房的計劃實施的如何了?傅菁在回答中意外的爆料楊超越明年買房,村花表示試試,一旁yamy的表情亮了。傅菁在回答過程中意外Cue到楊超越買房的事並說明年就買房是不是太快了,擔心楊超越沒法辦實現。而楊超越的回答讓人十分意外,楊超越回答自己試試,因為自己是錦鯉說不定會實現。
  • AAAI 2019評審惹爭議!「好論文」遭退稿?程序主席回應
    ,投稿數量高達7745篇,錄取率僅為16.2%,論文評審的繁重與嚴格可想而知。人工智慧「The」頂會之一的AAAI 2019論文錄取結果昨日公布,16.2%,可以說是AAAI錄取率最低的年份之一,更何況今年的投稿數量高達7745篇,比去年相翻了一番!
  • 21全國藤校錄取情況匯總,錄取率大幅下降!美國留學怎麼了?!
    截止目前,藤校+美國US排名TOP10中,除了普林斯頓(取消早申)和芝加哥大學外,其餘學校均已發榜。加州理工學院2021US美國大學排名第9美國時間12月12日,加州理工早申放榜,但尚未公布今年早申招生數據,上個招生季,加州理工2024屆本科新生錄取率僅有6.49%,招生人數相當少,錄取難度非常高(總體錄取率與MIT
  • AAAI 2021最「嚴」一屆放榜:錄取率僅21%,網易伏羲9篇論文入選
    近日,國際人工智慧頂級會議AAAI 2021公布論文錄取結果。網易伏羲實驗室再創佳績,共有9篇論文入選,研究方向涉及強化學習、虛擬人、自然語言處理(NLP)、圖像動畫、用戶畫像等領域。科研成果的集中爆發,充分顯示網易伏羲在人工智慧的多個領域已經具備國際頂尖的技術創新能力。
  • 社交媒體和arXiv存在,讓雙盲評審形同虛設 | Reddit熱議
    白交 發自 凹非寺量子位 報導 | 公眾號 QbitAI雙盲評審機制真的雙盲嗎?最近,Reddit上有這樣一個討論:社交媒體與arXiv是否損壞了頂會雙盲的機制?
  • 社交媒體和arXiv存在,讓雙盲評審形同虛設|Reddit熱議
    白交 發自 凹非寺量子位 報導 | 公眾號 QbitAI雙盲評審機制真的雙盲嗎?最近,Reddit上有這樣一個討論:社交媒體與arXiv是否損壞了頂會雙盲的機制?而此時,這些大會的評審工作還沒有完全結束。這樣做不僅會給雙盲評審人員巨大壓力,還損壞了頂會雙盲評審機制。還沒有通過同行評審就放arXiv和社交媒體上,那雙盲豈不是在搞笑?影響力or接收,哪個更重要?先不論雙盲機制是否真的雙盲。
  • TensorFlow驚現大bug?網友:這是逼著我們用PyTorch啊
    機器之心報導參與:魔王、陳萍誕生五年的 TensorFlow 出現大 bug,使用對應訓練方式得到的模型甚至論文結果可能受到波及,然而相關 issue 提交 24 天后依然沒有 TensorFlow 開發團隊的處理。
  • 2020年全國各省高考錄取率對比,預測2021高考錄取率趨勢
    保守估計,2021年高考參考考生逾千萬的可能性極大。全國各省2012-2020參考人數變化全國1998-2018高考人數及錄取率變化根據全國普通高考報名人數及錄取人數計算,高考錄取率從1977年恢復高考時的4.79%,上升至1998年的33.75%,伴隨著21世紀的擴招上升至2018年的81.13%,再創新高。
  • 獨家!2021屆Top100美國大學最詳儘早申政策資料出爐
    受疫情的影響,很多美國大學的新一輪申請規則都有所更改,陸續有學校取消早申請政策,也有一些學校增加了ED2等等。這篇文章,我們將為大家總結這些新變化,2020-2021申請季有需要的同學,記得收藏!麗格美本顧問團隊為大家精心準備了乾貨:TOP100美本大學早申請政策時間表這份資料詳細列出了美國排名前100所大學的錄取率
  • 教育部:2020年全國各省高考錄取率對比,預測2021高考錄取率趨勢
    保守估計,2021年高考參考考生逾千萬的可能性極大。全國各省2012-2020參考人數變化全國1998-2018高考人數及錄取率變化根據全國普通高考報名人數及錄取人數計算,高考錄取率從1977年恢復高考時的4.79%,上升至1998年的33.75%,伴隨著21世紀的擴招上升至2018年的81.13%,再創新高
  • 楊超越「叫醒服務」?沒想到素顏的楊超越,帶上大框眼鏡也好可愛
    先說楊超越,創造101出道,結果因為某些原因成為了團隊的核心,甚至被王思聰還調侃,楊超越是個錦鯉,自此之後在網絡上就出現了拜楊超越這條錦鯉的各種圖片。但是其實在之後的很多綜藝節目中,才看出,楊超越其實是一位非常可愛,純真,家庭又非常樸素的一位藝人。
  • 楊超越決定轉行!入職網易成程序猿?
    自今年五月份開始,創造101出身的火箭少女楊超越就在網易《大話西遊》手遊的各種宣傳上異常活躍,先是在網易520品牌發布會上,以驚喜小龍女的身份登場宣布成為《大話西遊》手遊代言人,憑藉仙氣的造型吸睛無數。
  • 楊超越:走到哪一步都不要放棄
    在創造101的初舞臺上因為害怕影響到隊友邊跳邊給自己數拍子,活得小心翼翼。隨後被導師羅志祥調侃道:「你退賽吧!」但是正如黃子韜說的那樣,楊超越有一項別人沒有的東西—叫作觀眾緣。很多女選手比她更有實力學習能力也更強,但是楊超越卻意外的受觀眾喜歡,看著她跳舞出紕漏,唱歌走音。觀眾就像是看到了自己的影子似的意外地對了胃口,隨後楊超越的分數一路標高。在最終的成團夜以第三名的好成績入選。
  • 全省前1%都上不了985?!2020高考985錄取率獨家分析
    每年高考結束後,很多同學都會表示今年的高考又難出了一個新高度。從全國來看,哪個省份的高考最難,想考名校最不容易呢?今天,慧姐通過量化的指標對比各省考上985高校的難度差異,希望可以給2021高考的老師、同學和家長一些參考及建議。
  • 楊超越再「超越」:登頂2019影響力女歌手TOP1,獨一無二的「錦鯉」
    更有人說這妹子就是錦鯉,名字正好又是"超越",可謂是天選之女。楊超越為什麼能夠登頂呢?一起看下去,或許你在心裡能得到答案。1、 天選之女的前世今生楊超越出身普通,並沒有像大家暗地裡爆料的那樣擁有強大的後臺,小時候父母離異,念完初中後,小小年紀孤身一人就出遠門打工,餐廳服務員、縫紉女工都做過。