NeurIPS 2019放榜:華人作者貢獻42%,谷歌170篇屠榜;國內清華第一_風聞
量子位-量子位官方账号-2019-09-09 13:19
李根 一璞 乾明 發自 凹非寺
量子位 報道 | 公眾號 QbitAI
一年一度,AI科研華山論劍。
只是2019年NeurIPS,決戰之巔選在了加拿大温哥華。
NeurIPS,全稱Conference and Workshop on Neural Information Processing Systems。
中文譯為:神經信息處理系統大會。
是全球最受矚目的AI、機器學習頂級學術會議之一。
盛況之隆,門票都一票難求。所以可以想象,論文入選NeurIPS又意味着什麼。
現在,2019年NeurIPS論文入選完整名單已公佈。
也是AI領域的科研琅琊榜。
NeurIPS 2019概況
先説整體情況。
按照NeurIPS官方披露信息,今年共計收到6743篇論文投稿——創下新紀錄,其中總共有1428篇論文接收入選,入選率21.1%,比去往年微微提升。
海外科研小哥Diego Charrez列出了對比圖:
整體上看,NeurIPS投稿論文數逐年遞增趨勢非常明顯,2014年總投稿1678篇,5年後已是6743篇了。
AI之熱,可見一斑。
再從作者維度分析。
被接收入選的1428篇論文,總共來自4421位科研人員。
其中有3690位作者1篇入選,511位作者2篇入選,47位作者4篇入選……
單人8篇以上的共有5人。
其中UC伯克利大牛Pieter Abbeel、CMU的Ruslan Salakhutdinov,以及新晉圖靈獎得主Yoshua Bengio,都是9篇入選。
入選論文最多的榮譽屬於UC伯克利的Sergey Levine,他署名投稿的論文,共有12篇被接收。
其次是INRIA的大牛Francis Bach,共有10篇。
華人作者中,論文入選數最靠前的是陶大程,共有8篇入選。
陶大程目前是澳大利亞科學院院士、悉尼大學教授,同時也擔任優必選機器人的首席科學家。
此次NeurIPS論劍中,悉尼大學的華人力量也格外閃耀。
如果從論文作者數而言,最多的是2-5人署名,不過也有40篇論文只有單一作者。
最後機構角度盤點。
格局形勢與去往年差不多,屠榜者均是傳統豪強。
總共有5大組織入選論文數超過100篇。
其中工業界的是Google+DeepMind和微軟。
學術界則是MIT、斯坦福和CMU。
其中Google—DeepMind的組合雄霸天下,共計170篇入選。
第二名麻省理工,86篇入圍。
斯坦福以85篇排名第三。
CMU有79篇,微軟有76篇。
UC伯克利、普林斯頓、Facebook、哥倫比亞大學、牛津大學,以及IBM均有超過40篇入選。
中國方面排名最靠前的是清華大學,總榜排名13,共有33篇入圍。
中國科研機構方面,北大位列第二,總榜排名22,共有23篇入選。
其後是中科院、浙大、港中大、南大和復旦,都有超過5篇被錄取。
更多詳情,後面還會公佈具體統計情況。
論文題目關鍵詞方面,詞雲圖分佈如下:
華人力量
值得一提的是NeurIPS 2019展示出的華人力量。
量子位初步統計,1428篇總入選論文中,華人作者署名入選的有596篇,佔比42%。
其中身為第一作者的論文有465篇,佔比華人作者參與論文數的78%,佔比總錄用的33%。
目前AI科研領域的華人力量,由此可見一斑。
而如果按照一作所屬機構來計,來自中國的入選論文共計144篇。
佔比總錄取論文數的10%。
相比去往年,亦在保持增漲,而且從中國機構參與情況統計,來自學術界和工業界的分佈同樣可圈可點,甚至還有一篇來自VC機構的論文入選——全球範圍內都實屬罕見。
中國學術界
學術科研機構,量子位初步統計結果:
清華:33;北大:23;中科院:12。
浙大:7;香港中文大學:7。
南大:5;復旦:5。
西安交大:4;南方科技大學:4。
西安電子科技大學:3;天津大學:3。
廈大:2;大連理工:2;深圳大學:2;中山大學:2;國防科技大學:2;大連理工:2;上海財經:2。
上海交大:1;武大:1;南京航空航天:1;華東師範大學:1;南京理工:1;電子科技大學:1;北航:1;北理工:1;廣東工業大學:1。
整體情況而言,清華鋒芒不可擋,北大和中科院隨其後。
而浙大、南大和復旦,依然是第二梯隊中的中間。
西安交大、南方科技大學等,則緊隨其後。
中國工業界
騰訊:18;阿里巴巴:11;百度:7。
華為:4;京東:3;商湯:3。
曠視:2;字節跳動:2;滴滴:2。
創新工場:1;地平線:1;海康威視:1;圖森未來:1;飛步科技:1;微眾銀行:1;香儂AI:1。
工業界方面,騰訊這兩年對基礎科研的投入也換來成果,18篇入選位列第一。
阿里巴巴+螞蟻金服有11篇入選。
百度則有7篇。
而且值得一提的是,百度7篇入選中,6篇與其認知計算實驗室負責人李平博士有關。
另外,那篇罕見的來自VC機構的論文來自**創新工場。**一作是創新工場南京國際AI研究院執行院長馮霽,二作是創新工場南京國際人工智能研究院研究員蔡其志,南京大學AI大牛周志華教授也在作者列。
大牛和新星
最後,除了上述介紹的幾位高產大牛,此次NeurIPS 2019入選論文中,也不乏其他AI大牛身影。
深度神經網絡之父、圖靈獎新晉得主Geoffrey Hinton,有三篇入選:
When does label smoothing help?https://arxiv.org/abs/1906.02629
Lookahead Optimizer: k steps forward, 1 step backhttps://arxiv.org/abs/1907.08610
Stacked Capsule Autoencodershttps://arxiv.org/abs/1906.06818
斯坦福大學教授李飛飛,2篇入圍:
Regression Planning Networks
HYPE: A Benchmark for Human eYe Perceptual Evaluation of Generative Modelshttps://arxiv.org/abs/1904.01121
曠視研究院院長孫劍,同樣2篇入選:
Learnable Tree Filter for Structure-preserving Feature Transform
DetNAS: Backbone Search for Object Detectionhttps://arxiv.org/abs/1903.10979
並且大牛價值,也在於形成學術重鎮。李飛飛所在的斯坦福自不必多言,已是傳統豪強。
而Yoshua Bengio發起的MILA(加拿大),Hinton加持的多倫多大學(加拿大),孫劍擔綱的曠視研究院,也都在此次NeurIPS勢頭隱隱。
如果單論中國力量,無論清華、北大還是中科院,其實都和騰訊、阿里等產生“產學研”結合下的化學反應,亦如西安交大和曠視、港中大和商湯。
所以論文入選放榜,只是結果,但結果背後,也隱含諸多可循跡的原因和方法。
最後,江山代有才人出,介紹幾位NeurIPS 2019中的新星。
Yuanzhi Li,6篇入選,2014年清華計算機&數學本科畢業生,2018年在普林斯頓獲得計算機博士學位,目前在斯坦福。
朱澤園(Zeyuan Allen-Zhu):4篇入選,而且都是一作身份——而且是第二次創下如此戰績。
朱澤園目前在微軟總部研究院,但之前早已名震江湖。南京外國語畢業,高一保送清華。2005、2006兩年蟬聯IOI金牌,2009年ACM總決賽亞軍——與教主樓天城是隊友,清華畢業後他去MIT讀完了碩士和博士。
對於朱澤園來説,數篇一作論文入頂會已是家常便飯,在2017年ICML上,他還有過5篇一作論文入選的神蹟。
還有一位清華姚班傳奇,目前身在杜克大學的鬲融,他此次有2篇論文入選。鬲融今年還囊獲了“斯隆獎”。
總之,NeurIPS 2019放榜只是結果,但其中暗含的潛力和未來,值得期待。
One more thing
再補充一點NeurIPS背景信息。
今年的NeurIPS已經是第33屆了,將於12月8日~14日舉辦。
之前會議的簡稱是NIPS,由於這個詞剛好有某種污污的意思,因此在廣泛呼籲下,去年年底,組委會把簡稱改成了NeurIPS。
而正是由於機器學習的火爆,近幾年的NIPS一票難求,堪稱學術界的五月天周杰倫的演唱會,都是需要卡點搶奪。
去年的NIPS 2018,第一波放票後11分38秒後就賣光了,連特斯拉AI總監、李飛飛得意門生Andrej Karpathy都要吐槽:早上喝了杯咖啡,NIPS的門票就賣完了。
於是到了今年,NeurIPS 2019乾脆不搶票了,改成了靠抽獎的方式、發送邀請函,這樣就不受網速和時區的影響了。
甚至除了門票競爭激烈,投稿也一樣艱難,NeurIPS 2019投稿截止時,官方服務器宕機了,最後組委會決定將提交論文的截止時間延後了兩個小時才解決問題。
以上,接下來就靜候最佳論文了。
注:內文作者和單位統計非NeurIPS官方梳理,歡迎指正補充,筆芯。