2022 年，人工智能在 AIGC、AI for science 等領(lǐng)域持續(xù)發(fā)展，一些工作也在知識(shí)型模型方面做出了探索。除了這些研究成果，我們還會(huì)發(fā)現(xiàn)這一年人工智能從業(yè)者的工作情況也有比較大的變化。

例如，Meta 等大型科技公司進(jìn)行了大規(guī)模的裁員，讓很多 AI 從業(yè)者考慮新的就業(yè)方向。另一方面，多位 AI 專(zhuān)家選擇離開(kāi)大型科技公司，投身 AI 創(chuàng)業(yè)。

根據(jù) Business Insider 的一項(xiàng)調(diào)查統(tǒng)計(jì)，近一年內(nèi)，僅 Alphabet 這一家公司就有 26 位 AI 專(zhuān)家離職，其中包括子公司谷歌、DeepMind 兩大科技巨頭。多位專(zhuān)家離職之后創(chuàng)辦了新公司，并總計(jì)籌集到數(shù)億美元，致力于構(gòu)建下一代 AI 工具。

無(wú)論是 DALL-E 2 等 AIGC 模型，還是 ChatGPT 這樣的大規(guī)模語(yǔ)言模型，它們都需要技術(shù)和資源兩方面的強(qiáng)有力支撐。在資源方面，谷歌、Meta、Hugging Face、Stability AI 等公司會(huì)提供強(qiáng)大的訓(xùn)練基礎(chǔ)設(shè)施；而在技術(shù)支撐上，當(dāng)下 AI 領(lǐng)域的許多大進(jìn)展都可以追溯到谷歌的研究者在 2017 年發(fā)表的一篇開(kāi)創(chuàng)性論文 ——《Attention is all you need》。

這篇論文提出的 Transformer 架構(gòu)成為后來(lái)許多 AI 模型的基礎(chǔ)。目前，這篇發(fā)表 5 年的論文引用量已破 6 萬(wàn)。現(xiàn)在這些作者所在的機(jī)構(gòu)發(fā)生了很大變化：

因此，谷歌會(huì)成為機(jī)器學(xué)習(xí)專(zhuān)業(yè)人才的來(lái)源，這一點(diǎn)應(yīng)該不足為奇。特別是 Transformer 的論文作者，其中已有六位推出了自己的創(chuàng)業(yè)公司，還有一位已經(jīng)加入 OpenAI，僅余一位還在谷歌工作。

Adept AI

Ashish Vaswani 和 Niki Parmar 二人在 2022 年 4 月成立了 Adept AI，并從 Addition 和 Greylock 等獲得融資 6500 萬(wàn)美元。這家創(chuàng)業(yè)公司專(zhuān)注于創(chuàng)建一種基于與文本生成工具相同核心技術(shù)的機(jī)器人，CEO、CTO 和首席科學(xué)家都來(lái)自谷歌，還聚集了一批曾在谷歌工作的技術(shù)人才：

• David Luan：Adept AI CEO。前 OpenAI 加州實(shí)驗(yàn)室工程副總裁，曾加入谷歌大腦，GPT-2、PaLM 的論文作者之一，參與了 GPT-3 的部分工作；
• Ashish Vaswani：Adept AI 首席科學(xué)家。Transformer 論文作者之一。
• Niki Parmar：Adept AI CTO。前谷歌大腦研究員，Transformer 論文作者之一。
• Anmol Gulati：前谷歌大腦研究工程師，曾參與谷歌的大規(guī)模語(yǔ)音和語(yǔ)言建模研究；
• Erich Elsen：在 DeepMind、谷歌大腦、百度都工作過(guò)，研究涉及機(jī)器學(xué)習(xí)和高性能計(jì)算交叉領(lǐng)域，在 DeepMind 參與領(lǐng)導(dǎo)大模型的訓(xùn)練工作；
• Kelsey Szot：前谷歌 ML 產(chǎn)品經(jīng)理，曾領(lǐng)導(dǎo)谷歌大模型生產(chǎn)基礎(chǔ)設(shè)施產(chǎn)品。

David Luan 曾講述過(guò)自己離開(kāi)谷歌創(chuàng)業(yè)的動(dòng)機(jī)：

在谷歌，我們訓(xùn)練出了越來(lái)越大的 Transformer，夢(mèng)想著有朝一日構(gòu)建一個(gè)通用模型來(lái)支持所有 ML 用例。但是，這其中有一個(gè)明顯的局限：用文本訓(xùn)練出的模型可以寫(xiě)出很棒的散文，但它們無(wú)法在數(shù)字世界中采取行動(dòng)。你不能要求 GPT-3 給你訂機(jī)票，給供應(yīng)商開(kāi)支票，或者進(jìn)行科學(xué)實(shí)驗(yàn)。

Inflection AI

此外還有 Inflection AI，這是一家在通用建模領(lǐng)域的私人企業(yè)，它在 2022 年 5 月籌集了 2.25 億美元。Mustafa Suleyman 是 Inflection AI 的 CEO 和聯(lián)合創(chuàng)始人。

Mustafa Suleyman

Mustafa Suleyman 是 DeepMind 人工智能實(shí)驗(yàn)室的創(chuàng)始成員，并在 2020 年（也就是谷歌收購(gòu) DeepMind 六年之后）成為谷歌人工智能產(chǎn)品與政策副總裁。至少有四名谷歌 AI 員工在今年加入了 Inflexion AI：

• Karen Simonyan：曾是 DeepMind 首席研究員，現(xiàn)為 Inflection AI 聯(lián)合創(chuàng)始人、首席科學(xué)家。
• Rewon Child：曾是谷歌大腦研究員，現(xiàn)為 Inflection AI 技術(shù)人員。
• Maarten Bosma：曾是谷歌大腦研究工程師，從事 PaLM 模型的研究，現(xiàn)為 Inflection AI 技術(shù)人員。
• Joe Fenton：前谷歌高級(jí)產(chǎn)品經(jīng)理，曾從事 LaMDA 研究，現(xiàn)為 Inflection AI 團(tuán)隊(duì)成員。

Character. AI

Character.ai 是另一家由關(guān)于人工智能的開(kāi)創(chuàng)性文章的作者創(chuàng)立的創(chuàng)業(yè)公司。這家公司的產(chǎn)品為用戶提供了一種與機(jī)器人對(duì)話的方式。這家公司正式成立于 2021 年 10 月，對(duì)于這家公司的組織架構(gòu)和業(yè)務(wù)模式，外界不甚了解。

Character.AI 的創(chuàng)始人、CEONoam Shazeer 是前谷歌首席軟件工程師，Transformer 論文作者之一。他在 2000 年底加入谷歌，直到 2021 年最終離職，是谷歌最重要的早期員工之一。

還有四位谷歌 AI 技術(shù)人才陸續(xù)加入了 Character.AI：

• Irwan Bello：前谷歌大腦團(tuán)隊(duì)研究員，現(xiàn)為 Character.ai 創(chuàng)始團(tuán)隊(duì)成員。
• Prajit Ramachandran：前谷歌大腦研究員，現(xiàn)為 Character.AI 的創(chuàng)始研究員。
• Romal Thoppilan：谷歌聊天機(jī)器人 LaMDA 論文作者之一，現(xiàn)為 Character.ai 創(chuàng)始研究員。
• Daniel De Freitas：LaMDA 論文的作者之一，現(xiàn)為 Character.AI 總裁。

從 DeepMind 離開(kāi)的人

另外，谷歌母公司 Alphabet 的另一家子公司 DeepMind 也有多位專(zhuān)家離職，加入初創(chuàng)公司。外媒 The Next Web 將 DeepMind 稱(chēng)為「一個(gè)人才流失的創(chuàng)業(yè)工廠」。

EquiLibre Technologies

今年 1 月，Martin Schmid、Matej Moravcik 和 Rudolf Kadlec 離開(kāi) DeepMind，創(chuàng)立了專(zhuān)注股市領(lǐng)域的 AI 初創(chuàng)公司 EquiLibre Technologies。三人均是 DeepMind 德?lián)?AI DeepStack 的開(kāi)發(fā)者。

Martin Schmid 是 DeepMind 前高級(jí)研究員、DeepStack 和 Player of Games 的作者之一，現(xiàn)在是 EquiLibre Technologies 的 CEO、聯(lián)合創(chuàng)始人。

Rudolf Kadlec 是 DeepMind 前高級(jí)研究員、Player of Games 的合著者， 目前是 EquiLibre  Technologies 的 CTO、聯(lián)合創(chuàng)始人。

Jack Rae

前 DeepMind 高級(jí)研究員，現(xiàn)在是 OpenAI 的一名工程師。

其他

Eric Jang

前谷歌高級(jí)研究員，現(xiàn)為機(jī)器人公司 Halodi Robotics AI 副總裁。

Tatiana Shpeisman

前谷歌高級(jí)工程經(jīng)理，從事 CPU 和 GPU 編譯器方面的工作，現(xiàn)在是 Modular 的編譯器工程總監(jiān)。

Maithra Raghu

前谷歌高級(jí)研究員，現(xiàn)在是 Samaya AI 的聯(lián)合創(chuàng)始人兼首席執(zhí)行官。

Alex Hanna

前谷歌 AI 倫理部門(mén)的高級(jí)研究員，現(xiàn)在是分布式 AI 研究所（DAIR）的研究主任，DAIR 是由之前被谷歌解雇的女研究員 Timnit Gebru 成立的初創(chuàng)公司。

Barret Zoph

前 Google Brain 研究員，現(xiàn)在是 OpenAI 的一名工程師。

Sara Hooker

前 Google Brain 研究員，現(xiàn)在領(lǐng)導(dǎo)非營(yíng)利性機(jī)器學(xué)習(xí)研究實(shí)驗(yàn)室 Cohere For AI。值得注意的是，《Attention is all you need》論文的作者之一 Aidan Gomez 就是 Cohere For AI 的聯(lián)合創(chuàng)始人兼 CEO，他也曾在 Google Brain 實(shí)習(xí)。

從個(gè)人的角度講，這些優(yōu)秀人才的離職創(chuàng)業(yè)是很有發(fā)展前景的；從整個(gè)行業(yè)看，多家初創(chuàng)公司迅速增長(zhǎng)也將推動(dòng)行業(yè)創(chuàng)新發(fā)展，豐富領(lǐng)域多樣性。也許對(duì)谷歌、DeepMind 這些科技巨頭來(lái)說(shuō)，這是一種人才流失，但它們?yōu)檎麄€(gè)領(lǐng)域的發(fā)展起到了人才搖籃的作用。