新智元报道
编辑:元子
【新智元导读】ICML 2020论文贡献榜排名出炉,Google在众多企业中以压倒性优势拔得头筹,斯坦福则喜获高校第一。国内高校企业中,清华荣获全球高校14名,百度、阿里、华为均上榜。
国际机器学习会议(ICML)是最著名的人工智能研究会议之一,成为人工智能的风向标。根据官方给出的数据,今年ICML 2020超过4990篇投稿,共有1088篇论文被录取,录取率为21.8%,低于去年的22.6%。
VC公司Thundermark分析了ICML每一篇被录取的论文,计算了每个机构的出版指数(见下文 「方法论 」部分)。比如Google的Publication Index为92.2,那么就可以理解为好比Google在ICML 2020上发表了92.2篇完整论文。
在我们进入顶会机构的实力排名之前,需要先弄明白这个榜单所遵循的方法论是什么,否则容易陷入无意义的争论中。
榜单排名所遵循的方法论
Thundermark团队表示,他们做的「发表索引」的编制方法,是了受到「自然」索引的启发。
https://www.nature.com/articles/d41586-019-03545-w
为了收集一个国家、一个地区或一个机构对一篇文章的贡献,并确保他们不会被重复累加,自然指数使用分数计数(FC),它考虑到每篇文章的作者份额。每篇文章可用的FC总量为1,在假设每个作者贡献相同的情况下,所有作者共享这个1。
例如,一篇文章有10位作者,意味着每位作者获得的FC为0.1。对于隶属于一个以上机构的作者,作者的FC将在每个机构之间平分。一个机构的总FC值由各个附属作者的FC值相加计算得出。
国家/地区的计算过程与此类似,但由于一些机构的海外实验室将被计入东道国/地区的总数中,因此计算过程比较复杂。
唯一不同的是, 发表指数将海外实验室计入总部国家/地区(而非东道国/地区)。这是一个有争议的问题,但Thundermark团队认为,这种方法更好地反映了总部、而不是当地实验室的知识产权分配,以及各自的利益累积。
下面是一个计算发表指数的例子。如果一篇论文有5个作者,比如3个来自麻省理工学院,1个来自牛津大学,1个来自谷歌,每个作者将获得1/5的积分,即0.2分。
因此,仅从这篇论文来看:
- MIT指数将增加3*0.2=0.6分,牛津大学和谷歌均增加0.2。
- 又,由于麻省理工学院的总部在美国,所以麻省理工学院的隶属关系将使美国的出版指数增加0.6
- 同理可得,由于牛津大学总部在英国,欧洲经济区 瑞士类将增加0.2
- 最后,谷歌是一家总部设在美国的跨国公司,因此美国的出版指数将额外增加0.2,合计增加0.8
如果一个作者有多个附属机构,我们将他/她的分数分给每个附属机构。
例如,在上面的案例中,如果最后一位作者列出了两个附属机构,Google和斯坦福大学(而不仅仅是Google),那么Google和斯坦福大学都将各自获得额外的0.2/2=0.1分。
好,接下来我们正片走起。
ICML 2020贡献榜:Google以压倒性分数霸榜,清华排名17
1. Google (USA) — 92.2
2. Stanford University (USA) — 39.2
3. MIT (USA) — 38.5
4. UC Berkeley (USA) — 34.2
5. Carnegie Mellon University (USA) — 24.0
6. Microsoft (USA) — 22.6
7. Facebook (USA) — 17.1
8. Princeton University (USA) — 17.0
9. University of Oxford (UK) — 16.3
10. UT Austin (USA) — 14.3
11. UCLA (USA) — 14.3
12. Duke University (USA) — 14.1
13. EPFL (Switzerland) — 13.9
14. Harvard University (USA) — 13.7
15. Cornell University (USA) — 12.6
16. ETH (Switzerland) — 12.4
17. Tsinghua University (China) — 12.3
18. National University of Singapore (Singapore) — 12.2
19. University of Pennsylvania (USA) — 12.1
20. Technion (Israel) — 12.1
21. IBM (USA) — 10.7
22. University of Washington (USA) — 9.7
23. UC San Diego (USA) — 9.5
24. University of Maryland (USA) — 9.0
25. Peking University (China) — 8.9
26. Georgia Institute of Technology (USA) — 8.8
27. University of Illinois at Urbana-Champaign (USA) — 8.7
28. University of Wisconsin-Madison (USA) — 8.7
29. University of Toronto (Canada) — 8.3
30. MILA (Canada) — 8.0
31. KAIST (South Korea) — 8.0
32. Texas A&M University (USA) — 7.9
33. RIKEN (Japan) — 7.8
34. University of Cambridge (UK) — 7.8
35. Columbia University (USA) — 7.8
36. UMass Amherst (USA) — 7.5
37. INRIA (France) — 7.5
38. New York University (USA) — 7.1
39. University College London (UK) — 6.8
40. University of Southern California (USA) — 6.8
41. Yale University (USA) — 6.6
42. Yandex (Russia) — 6.0
43. Shanghai Jiao Tong University (China) — 5.7
44. University of Minnesota (USA) — 5.6
45. University of Chicago (USA) — 5.6
46. McGill University (Canada) — 5.5
47. Seoul National University (South Korea) — 5.5
48. University of Tuebingen (Germany) — 5.5
49. University of Alberta (Canada) — 5.4
50. Rice University (USA) — 5.3、
ICML 2020论文美国高校贡献榜TOP 20:斯坦福夺魁
1. Stanford University — 39.2
2. MIT — 38.5
3. UC Berkeley — 34.2
4. Carnegie Mellon University — 24.0
5. Princeton University — 17.0
6. UT Austin — 14.3
7. UCLA — 14.3
8. Duke University — 14.1
9. Harvard University — 13.7
10. Cornell University — 12.6
11. University of Pennsylvania — 12.1
12. University of Washington — 9.7
13. UC San Diego — 9.5
14. University of Maryland — 9.0
15. Georgia Institute of Technology — 8.8
16. University of Illinois at Urbana-Champaign — 8.7
17. University of Wisconsin-Madison — 8.7
18. Texas A&M University — 7.9
19. Columbia University — 7.8
20. UMass Amherst — 7.5
ICML 2020全球高校贡献榜TOP 20:清华排14
1. Stanford University (USA) — 39.2
2. MIT (USA) — 38.5
3. UC Berkeley (USA) — 34.2
4. Carnegie Mellon University (USA) — 24.0
5. Princeton University (USA) — 17.0
6. University of Oxford (UK) — 16.3
7. UT Austin (USA) — 14.3
8. UCLA (USA) — 14.3
9. Duke University (USA) — 14.1
10. EPFL (Switzerland) — 13.9
11. Harvard University (USA) — 13.7
12. Cornell University (USA) — 12.6
13. ETH (Switzerland) — 12.4
14. Tsinghua University (China) — 12.3
15. National University of Singapore (Singapore) — 12.2
16. University of Pennsylvania (USA) — 12.1
17. Technion (Israel) — 12.1
18. University of Washington (USA) — 9.7
19. UC San Diego (USA) — 9.5
20. University of Maryland (USA) — 9.0
ICML 2020全球商业公司贡献榜TOP 20:百度、阿里、华为上榜
1. Google (USA) — 92.2
2. Microsoft (USA) — 22.6
3. Facebook (USA) — 17.1
4. IBM (USA) — 10.7
5. Yandex (Russia) — 6.0
6. Amazon (USA) — 5.2
7. OpenAI (USA) — 4.4
8. Criteo (France) — 4.4
9. Uber (USA) — 4.3
10. Samsung (South Korea) — 4.2
11. Baidu (China) — 3.9
12. Apple (USA) — 3.7
13. Alibaba (China) — 2.8
14. Huawei (China) — 2.6
15. Intel (USA) — 2.1
16. NVIDIA (USA) — 2.0
17. Qualcomm (USA) — 2.0
18. NEC (Japan) — 1.8
19. Salesforce (USA) — 1.7
20. Bosch (Germany) — 1.6
ICML 2020 vs ICML 2019:全球机构TOP 50
可以看到,今年和去年相比,基本上都是呈现了增长的趋势,只有部分机构如首尔National University、KAIST、Georgia Institute of Technology等,出现了负增长。
1. Google: 19.4
2. Stanford University: 14.7
3. MIT: 15.4
4. UC Berkeley: 10.0
5. Carnegie Mellon University: 4.8
6. Microsoft: 5.9
7. Facebook: 7.6
8. Princeton University: 6.3
9. University of Oxford: 2.7
10. UT Austin: 3.4
11. UCLA: 5.9
12. Duke University: 6.9
13. EPFL: 4.3
14. Harvard University: 6.7
15. Cornell University: 2.0
16. ETH: 0.3
17. Tsinghua University: 2.8
18. National University of Singapore: 9.7
19. University of Pennsylvania: 8.1
20. Technion: 3.9
21. IBM: 0.3
22. University of Washington: 0.6
23. UC San Diego: 7.2
24. University of Maryland: 4.7
25. Peking University: 3.1
26. Georgia Institute of Technology: -5.7
27. University of Illinois at Urbana-Champaign: -0.8
28. University of Wisconsin-Madison: 4.7
29. University of Toronto: 1.8
30. MILA: 4.3
31. KAIST: -3.1
32. Texas A&M University: 5.1
33. RIKEN: 2.2
34. University of Cambridge: 1.7
35. Columbia University: 1.9
36. UMass Amherst: 3.3
37. INRIA: 1.0
38. New York University: 3.4
39. University College London: 2.6
40. University of Southern California: 2.4
41. Yale University: 3.0
42. Yandex: 4.3
43. Shanghai Jiao Tong University: 3.5
44. University of Minnesota: 2.2
45. University of Chicago: 3.0
46. McGill University: 1.7
47. Seoul National University: -1.8
48. University of Tuebingen: 4.5
49. University of Alberta: 3.2
50. Rice University: 3.9
ICML 2020论文标题词云对比去年的变化
让我们看看ICML 2019和ICML 2020之间发生了什么变化。
正如你所看到的,全球AI研究领域领先的Top 5机构仍然是谷歌、斯坦福大学、麻省理工学院、加州大学伯克利分校和卡耐基梅隆大学。这5家机构都在ICML 2020上显著提高了自己的发表指数。
相比去年,Google增加了相当于19.4篇论文,斯坦福大学增加了14.7篇,麻省理工学院增加了15.4篇,加州大学伯克利分校增加了10.0篇,卡内基梅隆大学增加了4.8篇。看来顶尖的研究人员要想保持领先地位的重要方式之一,就是每年需要发表更多的论文。
作者介绍
本文作者Gleb Chuvv,MIT CS和AI Lab硕士。目前是Thundermark Capital的管理合伙人。Thundermark是一家专注于人工智能和机器人创业公司的风险投资公司。