谷歌大脑研究工程师 Eric Jang 的回答:DeepMind 是第一,谷歌大脑很快将升到第一梯队
首先,我需要声明我的回答会有一些偏见,因为我在谷歌大脑工作,而且我很喜欢谷歌大脑。我的观点仅代表我自己,不代表我的其他同事或 Alphabet 公司。
我对“AI研究领域的佼佼者”的科技公司的排名如下:
梯队1. DeepMind
我认为就现在来说,DeepMind 是 No.1 的。
他们发表的论文在研究界里很受推崇,而且涉及的领域非常广,例如深度增强学习,贝叶斯神经网络,
机器人学,迁移学习,等等。他们从牛津大学和剑桥大学招揽了大量Kaiyun官方网站app登录 ,这两所大学是欧洲最好的 ML 研究学府。他们也有一个多元化的团队专注于通用 AI 的研究,包括有专门打造基础设施和工具的软件工程师,帮助设计研究工具的 UX 设计师,甚至有生态学家(Drew Purves)专门研究其他领域,例如生态和智能之间的关系。
在 PR 和吸引公众目光方面,Deepmind 也是首屈一指的,例如 DQN-Atari 和创造历史的 AlphaGo 时的 PR。每当 Deepmind 发一篇论文,很快就会出现在 Reddit 机器学习板块和 Hacker News 的顶部,表明他们在技术社区多么受到推崇。
梯队2. Google
虽然我把两家 Alphabet 的子公司放在这个排名的顶端,但我得声明 Facebook 和 OpenAI 和 Google 是并列处于第二梯队的。
Yann LeCun 此前回答过一个类似问题,但我认为他错估了谷歌大脑在研究界的贡献。他说:
但它(谷歌大脑)大部分研究是专注于
应用程序和产品开发,而不是长期的 AI 研究。
完全不是这样!错了!
TensorFlow(谷歌大脑团队的主要产品)只是谷歌大脑众多项目中的一个,据我所知也是唯一面向外部的产品。谷歌大脑刚成立时,第一个研究项目确实偏向工程,但今天谷歌大脑团队已经有很多员工,关注 AI 每个子领域的长期的 AI 研究,就类似于 FAIR 和 Deepmind。
举例说来,FAIR 在 ICLR 2017 会议上有16篇论文被收录,其中3篇被录为 Oral(即非常杰出的论文)。
谷歌大脑今年在 ICLR 上被收录的论文实际上比 FB 还稍微多一些,有20篇,其中4篇被录为 Oral。
这还不包括 Deepmind 或谷歌其他团队(搜索团队、VR、Photos团队等)的论文。虽然比较被接收的论文数量不是很好的指标,但我想消除那些暗示谷歌大脑不是深度学习研究的好地方的说法。
谷歌大脑也是拥有很强协作灵活性的产业研究组织。我想世界上没有其他企业或研究机构同时与伯克利、斯坦福、CMU、OpenAI、Deepmind、Google X 以及谷歌内部的无数产品团队在进行合作。
我相信在不久的将来,谷歌大脑能够升到第一梯队。我个人有接到谷歌大脑和 Deepmind 的 offer,并选择了前者,因为我觉得谷歌大脑能给我更多灵活性来设计自己的研究项目,并且与谷歌内部的其他团队的合作更紧密,而且我加入了目前还不能公开的一些非常有趣的机器人项目。
梯队3. Facebook
FAIR 的论文很强,在我印象中他们重点关注的是语言领域的问题,例如问题回答,动态记忆,图灵测试,等等。偶尔他们也会发一些统计学、物理学和深度学习结合的论文。他们在计算机视觉方面也很强。不过除了他们的声誉非常好之外,我对 FAIR 了解不多。
由于 TensorFlow 的广泛采用,FAIR 几乎已经输掉了深度学习框架方面的竞争,但 Pytorch 是否能夺回市场份额值得观察。
梯队4. OpenAI
OpenAI 的成员阵容很强大:Ilya Sutskever(全面的深度学习牛人),John Schulman(TRPO的发明者,硕士方向是策略梯度),Pieter
abbeel(机器人学),Andrej Karpathy(Char-RNN,CNN),Durk Kingma(VAE 的发明者之一),Ian Goodfellow(GAN 的发明者),等等。
尽管 OpenAI 是一个只有约50人的小团队,但他们有一个顶尖的工程团队,研发一流的、真正有用的研究工具,例如 Gym 和 Unverse。他们也通过提供以前只有大科技公司能用的软件,为更多研究团体提供帮助。这也为其他公司增加了压力,使得他们开始开源代码和工具。
我差点想把 OpenAI 列为第一梯队,因为在拥有顶级研究人员方面他们不输 Deepmind,但他们成立不久,尚没有经历足够长的时间来证明这一点。他们也还没有发布与 AlphaGo 相当的成果,虽然我认为 Gym 和 Universe 对研究社区的意义非常重要。
作为一个所有基础设施都完全从头建起的小型非盈利研究团队,他们没有像大科技公司那么多的 GPU 资源、机器人或软件基础设施。拥有大量算力对研究,甚至对一个人能够想到的点子产生很大影响。
初创公司很艰难,我们可以观察他们在未来几年是否能够继续吸引顶尖的Kaiyun官方网站app登录 。
梯队5. 百度
百度 SVAIL 和百度深度学习研究院是做 AI 研究的很好的地方,他们正在开发许多有前景的技术,如家庭助理,盲人助理,自动驾驶汽车等。
虽然百度存在很多问题,但他们绝对是中国研究AI最厉害的企业。
梯队6. 微软研究
院
在深度学习的革命之前,微软研究院曾经是最负盛名的地方。他们的成员中多为多年 AI 研究经验的教授,这可能也解释了为什么他们错过了深度学习(因为深度学习的革命主要是由博士生们驱动的)。
而且,他们几乎所有的深度学习研究都是在 Linux 平台上进行的,他们的深度学习框架 CNTK 得到的关注不及 TensorFlow,torch,Chainer 等。
梯队7. 苹果
苹果在招揽Kaiyun官方网站app登录 方面确实有些艰难,因为研究人员通常都想公开出版自己的研究成果。苹果也做一些产品驱动的研究,但这无法吸引哪些想要解决通用 AI 问题的研究人员,或那些希望自己的研究成果被学术圈关注的研究者。我认为他们的设计根基与研究有很多相似之处,尤其是涉及创造力时,但我也认为发布新产品对长期的基础研究会是一种阻碍。
梯队8. IBM
我认识一位 IBM Watson 项目的前成员,他把 IBM 的“认知计算工作”描述为完全是一场灾难。这个项目由管理层推动,但这群人完全不懂机器学习能做什么,不能做什么,只是拿这个热词做卖点。Watson 使用深度学习做图像理解,但是据我所知,它的信息检索系统的其余部分并没有真正用到最新的深度学习技术。基本上,我认为IBM是在瞎搞,对初创企业来说,在二级市场有很多应用机器学习的机会。
备注
说实话,所有上述公司(也许除了IBM之外)都是做深度学习研究的好地方,而且鉴于开源软件和现在整个领域的快速发展,我不认为有任何一家科技公司在“领导 AI 研究“。
我对深度学习研究者的建议是找到一个你感兴趣的团队/项目,不用管别人对声誉的评价,而且专注于将工作做到最好,让你所在的机构成为AI研究的佼佼者。
如何评价苹果、微软、谷歌和Facebook之间的人工智能实力?LeCun 的回答
关于这一点,我的立场让我无法做出公平的回答,但有几点我可以说一下:
苹果不是人工智能研究圈子里的玩家,因为他们的公司文化很隐秘。你不可能在隐秘的氛围下做前沿研究。不发表则算不是研究,顶多也就是技术进步。
微软一直都在做一些很好的工作,但有很多Kaiyun官方网站app登录 都在从微软流向Facebook和谷歌。微软过去做了一些很厉害的语音相关的深度学习研究(2000年左右在手写识别方面取得了很好的成果)。但从他们最近的一些项目可以看出,微软研究院的目标相比FAIR或DeepMind要逊色很多。
谷歌(具体是Google Brain等研究组)无论是在深度学习产品还是服务方面都可以算是领先的,因为谷歌在这方面起步最早。他们在基础设施(比如TensorFlow和TPU)上有很多积累。但谷歌 AI 研究的关注点是应用及产品开发,而非长期 AI 研究。证据就是Google Brain 的一些顶尖研究人员离开了那里,去了DeepMind、OpenAI,或者到了FAIR。
DeepMind 在基于学习的 AI(learning-based AI)方面一直都做得很好。他们的长期目标跟FAIR的有些类似,研究的课题重合度也挺高:无监督/生成模型,规划(planning)、RL、游戏、记忆增强网络、差分编程(differentiable programming)。DeepMind的一个问题在于,他们从地理位置和组织结构上都远离谷歌(Alphabet)。这样就不太方便为其所有者盈利,不过他们现在看来做得挺好的。
Facebook的人工智能研究所FAIR成立于2.5年前,在这么短的时间内在业界树立起自身领导者的地位。我自己都为FAIR能吸引这么多世界顶尖AI研究员而感到震惊(FAIR有60多个研究员和工程师,现在分布在纽约、Menlo Park、巴黎和西雅图)。同样,我也为我们在过去两年半时间里取得的成果感到震惊。我们的目标远大,在FAIR我们从长期着眼,在公司里也有一定的影响力,因此存在不会受质疑(不出成果)。最关键的,我们非常开放:我们所有的研究员一年都会发表多篇论文。没有什么比看见一位前景大好的研究员加入一家不那么开放的公司或者一家初创企业,然后从研究圈子里消失更令人当头一棒的了。