未來(lái)50年的世界將是什么樣子?
《失控》作者、《連線》雜志創(chuàng)刊主編凱文·凱利相信,從未來(lái)5000天到未來(lái)50年,AI將成為世界最重要的關(guān)鍵詞,成為如同互聯(lián)網(wǎng)一樣無(wú)處不在的基礎(chǔ)設(shè)施。
而OpenAI,是他心目中最成功的AI公司,“一個(gè)絕佳的顛覆者案例”。
從去年底ChatGPT倉(cāng)促上線、意外爆紅以來(lái),這家公司和他的創(chuàng)始團(tuán)隊(duì),被這場(chǎng)席卷全球的技術(shù)狂熱推上了舞臺(tái)中央。
OpenAI從何而來(lái),又將去往何處?近期,知名科技記者Steven Levy在《連線》雜志發(fā)表了一篇長(zhǎng)文,對(duì)OpenAI公司的成長(zhǎng)史和公司愿景展開(kāi)了深度討論。
Altman的選擇
在領(lǐng)導(dǎo)OpenAI之前,Sam Altman已經(jīng)當(dāng)上了世界上最著名的科技孵化器Y Combinator的CEO,從所有這些獨(dú)角獸企業(yè)中套現(xiàn)的意義不在于裝滿(mǎn)合伙人的錢(qián)包,而在于為物種層面的變革提供資金。
他成立了一個(gè)研究部門(mén),希望為雄心勃勃的項(xiàng)目提供資金,以解決世界上最大的問(wèn)題。但在他看來(lái),AI才是顛覆一切的創(chuàng)新領(lǐng)域:一個(gè)能比人類(lèi)更好地解決人類(lèi)問(wèn)題的超級(jí)智能。
他甚至還有過(guò)競(jìng)選加州州長(zhǎng)的想法。但他意識(shí)到,他完全有能力做更大的事情——領(lǐng)導(dǎo)一家將改變?nèi)祟?lèi)本身的公司。
在加州的一場(chǎng)晚宴上,他與馬斯克一拍即合。
馬斯克當(dāng)時(shí)正與谷歌聯(lián)合創(chuàng)始人Larry Page吵得不可開(kāi)交。因?yàn)轳R斯克相信,人類(lèi)意識(shí)有珍貴的獨(dú)特性,但Page認(rèn)為機(jī)器和人是平等的,如果機(jī)器真的有了意識(shí)、消滅了人類(lèi),那就是自然進(jìn)化的法則,Page還指責(zé)馬斯克是一個(gè)“物種主義者”。
于是,馬斯克決心花一些錢(qián),為“人類(lèi)團(tuán)隊(duì)”做出更多努力。
既關(guān)心技術(shù)變革,也關(guān)心AI安全性的Altman,自然成了他心目中理想的合作伙伴。
一個(gè)嶄新的AI研究機(jī)構(gòu),靠什么吸引頂尖人才?Altman的答案是:AGI的瘋狂愿景。
AGI就是所謂的通用人工智能,即能夠像人類(lèi)一樣完成復(fù)雜任務(wù)的AI。在Altman仍在擔(dān)任YC CEO的那些日子,計(jì)算機(jī)已經(jīng)能通過(guò)深度學(xué)習(xí)和神經(jīng)網(wǎng)絡(luò)完成令人驚嘆的壯舉,比如給照片貼標(biāo)簽、翻譯文本和優(yōu)化復(fù)雜的廣告網(wǎng)絡(luò)。
這些進(jìn)步讓他相信,AGI第一次真正觸手可及。然而,把它交到大公司手中卻讓他感到擔(dān)憂(yōu)。他認(rèn)為這些公司會(huì)過(guò)于專(zhuān)注于自己的產(chǎn)品,而無(wú)法抓住機(jī)會(huì)盡快開(kāi)發(fā)出AGI。而且,如果他們真的創(chuàng)造出了AGI,他們可能會(huì)不計(jì)后果地在沒(méi)有采取必要預(yù)防措施的情況下將其公之于眾。所以需要有其他人來(lái)制衡他們。
Altman篩選招聘對(duì)象最重要的原則就是,必須是AGI的信徒。憑借他本人和馬斯克的號(hào)召力,以及探索AGI這套誘人的話(huà)術(shù),Altman挖來(lái)了Stripe CTO Greg Brockman和谷歌大腦核心科學(xué)家Ilya Sutskever等人。
2015年12月,OpenAI正式成立。
2021 年,他對(duì)記者表示:
“AGI只能打造一次。而且,能夠很好地運(yùn)營(yíng)OpenAI的人并不多。我很幸運(yùn),我生命中的一系列經(jīng)歷讓我真正積極地為此做好了準(zhǔn)備!
迷茫期
盡管有一個(gè)瘋狂而偉大的愿景,但OpenAI對(duì)如何實(shí)現(xiàn)目標(biāo)毫無(wú)頭緒。
Altman回憶道,當(dāng)最初這個(gè)小團(tuán)隊(duì)還沒(méi)有辦公室、聚集在Brockman公寓時(shí),他腦子一直在想:
“我們?cè)撛趺崔k?”
直到公司成立一年多以后,事情也沒(méi)有太大進(jìn)展。當(dāng)時(shí)公司并沒(méi)有一個(gè)明確的方向,只是隨便胡亂嘗試一通,鉆研解決視頻游戲的系統(tǒng),在機(jī)器人技術(shù)上花費(fèi)了大量精力,然后發(fā)幾篇論文。
Altman想起當(dāng)時(shí)公司的景象時(shí)說(shuō):
“我們知道我們想做什么。我們知道為什么要這么做。但我們不知道怎么做!
但他們相信。使用深度學(xué)習(xí)技術(shù)的人工神經(jīng)網(wǎng)絡(luò)不斷改進(jìn),為他們的樂(lè)觀情緒提供了支持。Sutskever說(shuō),追逐人工智能“并非完全瘋狂。它只是適度瘋狂而已”。
直到2016年,OpenAI等來(lái)了傳奇AI研究員Alec Radford。在接受OpenAI的邀請(qǐng)后,他告訴他的高中雜志,擔(dān)任這個(gè)新職位“有點(diǎn)類(lèi)似于加入一個(gè)研究生項(xiàng)目”——一個(gè)研究AI的開(kāi)放式、低壓力的棲息地。
Radford是一位內(nèi)斂、低調(diào)的研究者,他并未接受作者面對(duì)面采訪邀約,只是寫(xiě)了一封長(zhǎng)郵件描述了他在OpenAI的工作。
他最大的興趣是讓神經(jīng)網(wǎng)絡(luò)與人類(lèi)進(jìn)行清晰的對(duì)話(huà)。這與制作聊天機(jī)器人的傳統(tǒng)腳本模式不同,從原始的ELIZA到流行的Siri和Alexa,都采用了這種方法,但都很糟糕。他寫(xiě)道:“我們的目標(biāo)是看看是否有任何任務(wù)、任何環(huán)境、任何領(lǐng)域、任何事情,語(yǔ)言模型都能派上用場(chǎng)!
他解釋說(shuō),當(dāng)時(shí),語(yǔ)言模型被視為新奇的玩具,只能偶爾生成一個(gè)有意義的句子,而且只有在你真的瞇起眼睛的情況下才能生成。他的第一個(gè)實(shí)驗(yàn)是掃描 20 億條 Reddit 評(píng)論來(lái)訓(xùn)練語(yǔ)言模型。
和 OpenAI 的許多早期實(shí)驗(yàn)一樣,這個(gè)實(shí)驗(yàn)失敗了。沒(méi)關(guān)系。這位 23 歲的年輕人獲得了繼續(xù)前進(jìn)、再次失敗的許可。Brockman說(shuō):“我們當(dāng)時(shí)就想,Alec 很棒,就讓他做自己的事情吧!
轉(zhuǎn)折點(diǎn)
2017 年初,一篇由 8 位谷歌研究人員合著的研究論文的預(yù)印本出現(xiàn)了,但并未引起人們的注意。這篇論文的正式標(biāo)題是“Attention Is All You Need”,但它后來(lái)被稱(chēng)為“Transformer論文”,這樣命名既是為了反映這個(gè)想法改變游戲規(guī)則的性質(zhì),也是為了紀(jì)念從卡車(chē)變形為巨型機(jī)器人的玩具。
Transformer使神經(jīng)網(wǎng)絡(luò)能夠更高效地理解和生成語(yǔ)言。他們通過(guò)并行分析語(yǔ)料,找出哪些元素值得關(guān)注。這極大地優(yōu)化了生成連貫文本以響應(yīng)提示的過(guò)程。
最終,人們意識(shí)到,同樣的技術(shù)也可以生成圖像甚至視頻。雖然該論文后來(lái)被稱(chēng)為當(dāng)前AI狂潮的催化劑,但在當(dāng)時(shí),Ilya Sutskever只是少數(shù)幾個(gè)了解這一突破有多么強(qiáng)大的人之一。
Brockman回憶道,Ilya看到Transformer出現(xiàn)時(shí),驚喜地喊到‘這就是我們一直在等待的!
這就是OpenAI的策略——努力解決問(wèn)題,然后堅(jiān)信團(tuán)隊(duì)或這個(gè)領(lǐng)域中的某個(gè)人會(huì)設(shè)法找出缺失的部分。
此后,Alec Radford開(kāi)始試驗(yàn)Transformer結(jié)構(gòu)。他表示,當(dāng)時(shí)在兩周內(nèi)取得的進(jìn)展超過(guò)了過(guò)去兩年的進(jìn)展。他逐漸明白,要想最大限度地利用新模型,關(guān)鍵在于擴(kuò)大規(guī)!诔笠(guī)模的數(shù)據(jù)集上進(jìn)行訓(xùn)練。這個(gè)想法被他的同事Rewon Child稱(chēng)為“Big Transformer”。
這種方法需要改變OpenAI之前那種零散、各自為陣的企業(yè)文化,必須聚集團(tuán)隊(duì)資源,專(zhuān)注一個(gè)點(diǎn)的突破。Quora 首席執(zhí)行官Adam D'Angelo 是 OpenAI 的董事會(huì)成員,他對(duì)作者解釋道:
“為了利用 Transformer 的優(yōu)勢(shì),你需要擴(kuò)大它的規(guī)模。你需要把它辦得更像一個(gè)工程組織。你不能讓每個(gè)研究人員都做自己的事,訓(xùn)練自己的模型,做出可以發(fā)表論文的優(yōu)雅的東西。你必須做這些更乏味、不那么優(yōu)雅的工作!
Radford 和他的合作者給他們創(chuàng)建的模型起的名字是“generatively pretrained transformer”——GPT的縮寫(xiě)。最終,這個(gè)模型被通稱(chēng)為“生成式AI”。為了建立這個(gè)模型,他們收集了7000本未出版的書(shū)籍,其中很多都是浪漫、奇幻和冒險(xiǎn)類(lèi)型的書(shū)籍,并在Quora問(wèn)答以及初中和高中考試的數(shù)千段文章中對(duì)其進(jìn)行了完善。該模型包含 1.17 億個(gè)參數(shù)或變量,在理解語(yǔ)言和生成答案方面的表現(xiàn)優(yōu)于之前的所有模型。
但最引人注目的結(jié)果是,在處理如此大量的數(shù)據(jù)后,模型能夠提供超出其訓(xùn)練的結(jié)果,在全新的領(lǐng)域提供專(zhuān)業(yè)知識(shí)。這些計(jì)劃外的機(jī)器人能力被稱(chēng)為“零樣本”。它們?nèi)匀涣钛芯咳藛T感到困惑——這也是該領(lǐng)域許多人對(duì)這些所謂的大型語(yǔ)言模型感到不安的原因。
商業(yè)化
OpenAI前期的資金支持基本都來(lái)源于馬斯克。但在2018年,特斯拉開(kāi)始研究將AI技術(shù)用于自動(dòng)駕駛,而剛好OpenAI已經(jīng)有了顯著的技術(shù)突破。
馬斯克一直把OpenAI這家公司視為自己的所有物,于是他在當(dāng)時(shí)提議,不如把整個(gè)公司都交給他來(lái)打理——直接把OpenAI并入特斯拉。但這個(gè)提議遭到Altman和其他高管的斷然拒絕,于是雙方切斷了聯(lián)系,馬斯克撤走了他全部的投資,在一次全體會(huì)議上宣布自己將要離開(kāi)。
會(huì)上,他預(yù)言O(shè)penAI將以失敗告終,他還稱(chēng)至少有一名研究人員是“蠢貨”。
由于公司沒(méi)有收入,馬斯克撤資無(wú)疑是一場(chǎng)生存危機(jī)。雖然OpenAI正在做的研究是硅谷最時(shí)髦的AI,但它是一家非盈利機(jī)構(gòu),這無(wú)疑限制了它融資的吸引力。
2019年3月,OpenAI的高管們想出了一個(gè)怪異的辦法。在保持非盈利的同時(shí),再創(chuàng)建一個(gè)盈利實(shí)體。但這個(gè)盈利部門(mén)的營(yíng)收有一個(gè)上限——這個(gè)數(shù)字并沒(méi)有公開(kāi),從公司章程推測(cè),可能高達(dá)數(shù)萬(wàn)億美元(OpenAI也相信,如果他們的營(yíng)收真的能達(dá)到這個(gè)數(shù)字,到時(shí)候肯定已經(jīng)做出來(lái)可以實(shí)際使用的AGI了)。在達(dá)到這個(gè)上限之后,盈利實(shí)體所得的一切都要?dú)w還給非盈利的實(shí)驗(yàn)室。
于是,憑借新的公司架構(gòu),OpenAI成功引入了紅杉等多家風(fēng)險(xiǎn)投資機(jī)構(gòu)。但尷尬的是,對(duì)OpenAI來(lái)說(shuō),數(shù)十億美元的風(fēng)險(xiǎn)投資只是微不足道的小數(shù)目,AI研發(fā)是一個(gè)夸張的無(wú)底洞。創(chuàng)造大型語(yǔ)言模型的Big Transformer方法需要大型硬件,GPT系列的每一次迭代都需要呈指數(shù)級(jí)增長(zhǎng)的算力,只有少數(shù)幾家公司有負(fù)擔(dān)的能力。
于是,OpenAI很快鎖定了微軟。Altman對(duì)記者表示,這是因?yàn)槲④汣EO Satya Nadella和CTO Kevin Scott足夠有魄力:在花費(fèi)了20多年時(shí)間和數(shù)十億美元建立了一個(gè)所謂的尖端AI研究部門(mén)之后,承認(rèn)自己的工作一團(tuán)糟,然后押注一家成立僅幾年的小公司。
微軟最初出資10億美元,以其服務(wù)器上的計(jì)算時(shí)間作為回報(bào)。但隨著雙方信心的增強(qiáng),交易規(guī)模不斷擴(kuò)大。現(xiàn)在,微軟已經(jīng)向OpenAI投入了130億美元。
微軟也為自己爭(zhēng)取到了一大筆好處,它不僅擁有OpenAI盈利部門(mén)的“非控股股權(quán)”——據(jù)稱(chēng)是49%,還獲得了OpenAI技術(shù)獨(dú)家商業(yè)化授權(quán)。而且,并且成功讓旗下云計(jì)算平臺(tái)Azure成為OpenAI的獨(dú)家云服務(wù)商。換句話(huà)說(shuō),微軟的巨額投資不但爭(zhēng)取到了一個(gè)強(qiáng)大的合作伙伴,還可以為Azure云服務(wù)鎖定全球最受歡迎的新客戶(hù)之一。
此外,根據(jù)交易條款,OpenAI最初的一些理想——為所有人提供平等訪問(wèn)權(quán)——似乎被丟進(jìn)了垃圾桶。
在交易的過(guò)程里,OpenAI逐漸有了營(yíng)利性機(jī)構(gòu)的性質(zhì),這讓一些員工感到反感,幾位高管隨之離職,他們認(rèn)為,OpenAI 已經(jīng)變得過(guò)于商業(yè)化,偏離了最初的使命。
OpenAI的未來(lái)
當(dāng)瘋狂的AGI愿景離現(xiàn)實(shí)越來(lái)越近,Sam Altman和他的團(tuán)隊(duì)面臨的壓力也越來(lái)越大,他們既要在每個(gè)產(chǎn)品周期內(nèi)實(shí)現(xiàn)革命,又要滿(mǎn)足投資者的商業(yè)需求,同時(shí)還要在激烈的競(jìng)爭(zhēng)中保持領(lǐng)先。更加關(guān)鍵的是,他們還肩負(fù)著防止讓AI消滅人類(lèi)的“準(zhǔn)救世主”的使命。
在時(shí)代的沖刷下,OpenAI變了很多,唯有建立安全的AGI這一愿景沒(méi)有改變,仍然在驅(qū)動(dòng)著他們向前。OpenAI的領(lǐng)導(dǎo)者們深信,他們將制造出足夠智能、足夠安全的AI系統(tǒng),將人類(lèi)帶入一個(gè)難以想象的富饒時(shí)代。