智東西(公眾號:zhidxcom)
編譯|依婷
編輯|Panken
智東西11月12日消息,近日,美國知名創(chuàng)業(yè)孵化器Y Combinator(YC)總裁兼CEO Garry Tan對OpenAI聯(lián)合創(chuàng)始人兼CEO Sam Altman(薩姆阿爾特曼)進(jìn)行了訪談。訪談從Sam Altman的博客文章《智能時代(The Intelligence Age)》切入,談到了OpenAI初創(chuàng)團(tuán)隊的建立、Scaling Law對OpenAI的意義、早年在YC和Loopt的經(jīng)歷、OpenAI團(tuán)隊變動,以及AGI的五級路徑等話題。
訪談中,Altman提到,在可預(yù)見的未來,隨著第五級AGIOrganizations的實現(xiàn),或許一個人加一萬個GPU就可以創(chuàng)建一家年營收達(dá)數(shù)十億美元的公司。而對于即將到來的2025年,他最期待的是AGI以及自己的孩子。
今年9月下旬,Altman在《智能時代》一文中預(yù)測,AI的超級智能(ASI)將在幾千天內(nèi)到來,而深度學(xué)習(xí)有效(deep learning worked)將成為OpenAI邁入智能時代的必經(jīng)之路。Altman說:“深度學(xué)習(xí)有效,并且可以預(yù)見的是,隨著規(guī)模的擴(kuò)大,深度學(xué)習(xí)會變得更好,而且我們?yōu)槠渫度肓嗽絹碓蕉嗟馁Y源。”
Altman在訪談中承認(rèn)這是一個非常瘋狂的陳述。但他可以看到一條路徑OpenAI正在做的工作不斷產(chǎn)生復(fù)利,讓其過去三年取得進(jìn)展的速度得以在接下來的三年、六年、九年甚至更長時間內(nèi)持續(xù)下去。
OpenAI使用的Scaling Law(縮放定律)常被業(yè)內(nèi)視作異端。Altman對此回應(yīng)說:“我們的資源遠(yuǎn)遠(yuǎn)少于DeepMind和其他公司。我們只需要選擇一個方向并真正集中精力。這就是我們的制勝法寶,也完全是正確的創(chuàng)業(yè)要點。Scaling是我一直感興趣的東西。事實證明,對于深度學(xué)習(xí)模型,我認(rèn)為這是一個極度被低估的財富和應(yīng)該追求的方向。”
關(guān)于近一年來的巨大人事變動,Altman也沒有避諱。他說:“任何公司都會以某種速度迎來團(tuán)隊變動,那些擅長從零到一的人,未必擅長從一到十或者從十到百!倍c此同時,雖然OpenAI距離實現(xiàn)AGI還有一段路程要走,但Altman說:“第一次感覺我們真的知道該做什么”。
作為近年來最受關(guān)注AI獨角獸的聯(lián)合創(chuàng)始人,Altman建議創(chuàng)業(yè)者押注AGI技術(shù)趨勢,和谷歌等大公司、甚至創(chuàng)立幾年的初創(chuàng)公司相比,“你的優(yōu)勢在于速度、專注、信念以及對技術(shù)發(fā)展速度做出反應(yīng)的能力”。
以下是對Sam Altman本次采訪的節(jié)選編譯,關(guān)于Altman早年在YC和Loopt的經(jīng)歷有所省略:
一、現(xiàn)在是創(chuàng)辦科技公司的最佳時機(jī),OpenAI遠(yuǎn)沒有達(dá)到極限
Garry Tan:讓我們談?wù)勀汴P(guān)于智能時代的最新文章。你認(rèn)為現(xiàn)在是創(chuàng)辦科技公司的最佳時機(jī)嗎?
Sam Altman:至少可以說,現(xiàn)在迄今為止最理想的時機(jī);希望未來會有更好的節(jié)點。我認(rèn)為,每次重大的技術(shù)革新都會極大地拓寬我們的能力邊界,你能做的事會比你之前能做的更多。我期望這些創(chuàng)業(yè)公司能創(chuàng)造更非凡的成就、帶來更深遠(yuǎn)的影響。
我認(rèn)為這就是最佳時機(jī)當(dāng)行業(yè)發(fā)展緩慢且缺乏活力時,大公司具有優(yōu)勢;當(dāng)像移動技術(shù)、互聯(lián)網(wǎng)或半導(dǎo)體等領(lǐng)域的變革興起時,甚至是過去的工業(yè)革命時期,新貴們就有了他們的優(yōu)勢。我們已經(jīng)很久沒有遇到這樣顛覆性的變革了。這就像文章里說的那樣相當(dāng)令人興奮。
Garry Tan:實際上,你在文中說了一件非常重要的事情,那就是AI的超級智能(ASI)會在數(shù)千天后到來。(注:We will have super intelligence in a few thousand days.)
Sam Altman:我的意思是說,我們希望……但無論如何,這是一個非常瘋狂的陳述。
我可以看到一條路徑我們正在做的工作不斷產(chǎn)生復(fù)利,讓我們過去三年取得進(jìn)展的速度得以在接下來的三年、六年、九年甚至更長時間內(nèi)持續(xù)下去。你知道的,九年大概是3500天。如果我們能夠保持這樣的迭代速度甚至更快,那系統(tǒng)能做很多事情。我認(rèn)為即使是像o1這樣的系統(tǒng),在特定領(lǐng)域內(nèi)的限定任務(wù)上,也已經(jīng)展現(xiàn)出了極高的基礎(chǔ)認(rèn)知能力。o1就是個非常聰明的存在,而我認(rèn)為我們遠(yuǎn)遠(yuǎn)沒有達(dá)到進(jìn)步的極限。
我們可能會撞到一些意想不到的墻,也可能會錯過一些東西,但在我們看來,未來還有很多復(fù)合增長會發(fā)生。
Garry Tan:這篇文章可能是我見過的幾乎所有文章中對技術(shù)最為樂觀的。里面寫到很多我們可以期待的事情,比如說修復(fù)氣候、建立太空殖民地、揭示所有物理學(xué)原理、實現(xiàn)近乎無限的智能以及獲取豐富的能源。
Sam Altman:我確實認(rèn)為所有這些事情可能還有更多我們無法想象的事情可能并不那么遙遠(yuǎn)。我們現(xiàn)在可以半認(rèn)真地談?wù)撨@些問題,這本身就很讓人振奮。
一直以來,我最喜歡YC的一件事是,它鼓勵可能讓人難以置信的技術(shù)樂觀主義,以及一種堅定的信念,即你可以解決這些問題。這像是早期的“PG精神(YC聯(lián)合創(chuàng)始人Paul Graham的創(chuàng)業(yè)理念)”,在一個不斷告訴人們“這行不通、那行不通”的世界里,鼓勵創(chuàng)始人大膽暢想。這是一件特別的事。
Garry Tan:豐富的能源似乎是一個宏大的議題。我們知道有A路徑和B路徑兩種解決方案。如果我們真的能夠?qū)崿F(xiàn)能源充足,這似乎能夠解鎖幾乎所有的工作,不僅僅是知識密集型工作。這可以通過機(jī)器人技術(shù)、自然語言處理以及無處不在的智能來實現(xiàn)。我們好像正步入一個真正的富足時代。
Sam Altman:無限的智能和豐富的能源,我認(rèn)為這是我們想要達(dá)成一切的兩個關(guān)鍵。還有很多其他重要的東西,但如果我們能真正擁有這兩者,我們就能使我們想發(fā)生的事情發(fā)生。比如,我們能更快地想出更好的創(chuàng)意,然后讓它們在物理世界中實現(xiàn)。更不用說運行大量的AI也需要能源。
我認(rèn)為這將是一個巨大的突破。我不確定是否要對這一切同時發(fā)生感到驚訝,因為或許這只是技術(shù)進(jìn)步速度不斷加快的自然結(jié)果。但這肯定是一個非常令人興奮的時刻,也是創(chuàng)業(yè)的好時機(jī)。
二、創(chuàng)建時的三個目標(biāo):無監(jiān)督學(xué)習(xí)、強(qiáng)化學(xué)習(xí)、團(tuán)隊不超過120人
Garry Tan:你當(dāng)時是如何確定OpenAI的初創(chuàng)團(tuán)隊成員的?
Sam Altman:Greg(OpenAI聯(lián)合創(chuàng)始人、總裁Greg Brockman)是很早就決定加入我們的核心成員;叵肫饋砀杏X就像一部電影,像是所有銀行搶劫電影的開頭,當(dāng)你開車去找人什么的時候。
就像Ilya(OpenAI前首席科學(xué)家Ilya Sutskever),我聽說他真的很聰明。然后我在YouTube和其他網(wǎng)站上看了他的一些視頻資料,我發(fā)現(xiàn)他極度聰明,像真正的天才,有著遠(yuǎn)見卓識。我當(dāng)時想,我遇到了那個家伙!我給他發(fā)了電子郵件,他沒有回復(fù);我就去參加他演講的某個會議,我們見面了。在那之后我們開始談?wù)摿撕芏嘞敕ā?br/>
Garry Tan:談話聊了些什么?比如我真的很喜歡你對AI的想法?或者說我想要建立一個實驗室?
Sam Altman:是的。回想起來,其中一件非常有效的事情是,我們從一開始就說,我們將在實地工作中去追求AGI當(dāng)時你不被允許這么說,因為這似乎是不可能的、是瘋狂的,而且?guī)缀跏遣回?fù)責(zé)任的這話引起了幾乎所有優(yōu)秀年輕人的關(guān)注,以及平庸年長者的嘲笑。
這是一個非常好的跡象,而且非常有力量。我們就像“愣頭青”。我那時30歲了,可能是團(tuán)隊中最年長的,但也有和這些不負(fù)責(zé)任、什么都不想做的年輕人一樣的地方。年輕人喜歡說這些荒謬的話。當(dāng)時真正吸引的人,我想是那些會說“我是大二學(xué)生,讓我們做這件事”的人。隨后我們四處奔走,一個接一個地結(jié)識盟友。這個過程斷斷續(xù)續(xù)花了九個月左右的時間。
在OpenAI的創(chuàng)立過程中,我印象最深刻的是,因為Ilya與谷歌存在合作關(guān)系的問題,我們在2015年12月宣布OpenAI成立,直到2016年1月才正式落地。然后大概是2016年1月3日,大家結(jié)束假期,去到Greg的公寓,有10個人。我們坐在一起,感覺就像我們做了一件劃時代的大事。每個人都說“那么我們現(xiàn)在該做什么?”這是一個多么有趣的時刻,它讓我想起了初創(chuàng)公司創(chuàng)始人非常努力地籌集資金的時候他們會想,“哦,我做到了,我們做到了”,但其實真正的考驗才剛剛開始。
Garry Tan:那不是開香檳的時候。實際上是發(fā)令槍,說明現(xiàn)在我們得跑了。
Sam Altman:你不知道比賽會有多難。我們花了很長時間才弄清楚我們要做什么。但整個初創(chuàng)團(tuán)隊,尤其是Ilya給我留下了非常深刻的印象。盡管這個過程充滿了曲折和變化,但我們最初的那些想法是如此正確。
我們就在Greg的公寓里,用白板列出了我們的想法和計劃;我們做了一些有用或無用功,最終才有了我們現(xiàn)在的這個系統(tǒng);仡欉^去,我們從那里走到這里,一路上走了很多彎路,但最終到達(dá)了我們當(dāng)初想做的目標(biāo)深度學(xué)習(xí)。
當(dāng)時有三個努力的方向弄清楚如何進(jìn)行無監(jiān)督學(xué)習(xí)、解決RL(Reinforcement Learning,強(qiáng)化學(xué)習(xí))問題,以及將團(tuán)隊人數(shù)控制在120人以內(nèi)。第三個失敗了,前兩個預(yù)測方向非常好。
三、“多即是多”,專注Scaling Law是OpenAI制勝法寶
Garry Tan:第二個目標(biāo)聽起來像Scaling(縮放定律)。這在一些人看來是有些冒犯意味的異端觀念。
Sam Altman:最開始我們的核心信念就是深度學(xué)習(xí)有效,且隨著規(guī)模的擴(kuò)大而變得更好。這在當(dāng)時都是有點異端信仰的。我們無法確切預(yù)知隨著規(guī)模的擴(kuò)大它會有多好幾年后才出現(xiàn)這種情況但直覺告訴我們這是可行的。
當(dāng)時的人們存在固有成見,認(rèn)為這些神經(jīng)網(wǎng)絡(luò)并未真正“學(xué)習(xí)”或“推理”,而只是在“玩把戲”。有一些領(lǐng)域內(nèi)的領(lǐng)軍人物也這樣說。他們認(rèn)為這是錯的,可能導(dǎo)致AI再次陷入寒冬。然而,我們目睹了模型性能的不斷提升,甚至比我們得到的Scaling結(jié)果更好,這有些打破我的直覺。我們當(dāng)時就決定要繼續(xù)推進(jìn)這一方向。
我們的資源遠(yuǎn)遠(yuǎn)少于DeepMind和其他公司。我們只需要選擇一個方向并真正集中精力。這就是我們的制勝法寶,也完全是正確的創(chuàng)業(yè)要點。Scaling是我一直感興趣的東西。事實證明,對于深度學(xué)習(xí)模型,我認(rèn)為這是一個極度被低估的財富和應(yīng)該追求的方向。我認(rèn)為,當(dāng)你有疑問時,如果你有一些看起來隨著規(guī)模的擴(kuò)大而變得更好的東西,你應(yīng)該擴(kuò)大規(guī)模。
Garry Tan:可能很多人會期待“少即是多”,但實際上對于OpenAI來說“多即是多”。
Sam Altman:我認(rèn)為關(guān)于OpenAI有一件事可能沒有得到很好的理解,那就是即使我們還很陌生,但我們有一支瘋狂而才華橫溢的研究團(tuán)隊。如果你有世界上最聰明的人,你可以推動一些非常困難的事情。
Garry Tan:我聽到過一個故事,關(guān)于計算資源的訪問權(quán)限。當(dāng)時業(yè)內(nèi)的一些老前輩會批評你們說,你會浪費大量資源,會導(dǎo)致AI寒冬。
Sam Altman:有趣的是,人們不確定我們是否浪費了資源,也不確定我們是否投入太多資源做了一些觸及道德邊界的事情。他們認(rèn)為你應(yīng)該分散賭注而不是篤定一個方向。世界上大多數(shù)人都不理解對一次賭注抱有相當(dāng)極端的信念的價值。于是我們說,好吧,我們有了這些證據(jù),我們相信這件事在當(dāng)時,通常的做法是會分散投資到多個賭注上,而我們選擇堅定地押注于這個單一目標(biāo),因為我們是明確的樂觀主義者。
有一段很長的時間,你必須甘愿在沒有數(shù)據(jù)的情況下進(jìn)行操作。在那一點上,你確實必須以信念為基礎(chǔ)。
Garry Tan:這也涉及到聚焦的問題。就像你必須做出選擇,而這個選擇更好。你沒有無限的選擇機(jī)會。所以,優(yōu)先排序本身就是一項練習(xí),它使你更有可能成功。
Sam Altman:我希望我可以告訴你,“哦,我們確切地知道會發(fā)生什么”。但顯然,故事的開篇是我們做了很多事情來幫助我們積累一些學(xué)科理解。我們并沒有走在捷徑上。如果我們當(dāng)時知道我們現(xiàn)在所知道的,我們可以讓整個事情達(dá)到令人難以置信的程度。事實并非如此,你不可能每個猜測都是對的。
我們一開始做了很多假設(shè),既有關(guān)于技術(shù)方向的假設(shè),也有關(guān)于我們將成為什么樣的公司、我們將如何構(gòu)建AGI等方面的假設(shè)。我們總是一次又一次地失敗。但我們的優(yōu)勢之一是在被打倒后能夠站起來繼續(xù)前進(jìn)。
至少我不知道語言模型會成為主流。我們開始研究機(jī)器人和Agent、視頻游戲等等。幾年后,GPT-3出現(xiàn)了,這在當(dāng)時并沒有太多跡象。
四、第一次真的知道該做什么,路徑越來越清晰
Garry Tan:你從去年下臺中學(xué)到了什么?對一些人的離開有什么感覺?團(tuán)隊在進(jìn)化,你又做得如何?
Sam Altman:累,但是很好。我們的進(jìn)展很快,仿佛在極短的時間內(nèi)跨越了中型乃至大型科技公司通常需要十年才能達(dá)成的成長階段。ChatGPT還不到兩年,這一路上,我們歷經(jīng)諸多磨難。任何公司都會以某種速度迎來團(tuán)隊變動,那些擅長從零到一的人,未必擅長從一到十或者從十到百。
在這個過程中,我們犯了很多錯誤,但也做了一些非常正確的事情。我認(rèn)為公司的目標(biāo)不論是構(gòu)建AGI還是其他任何東西,都要在每個階段盡可能地做出最好的決策。這將帶來很多變化。我希望我們現(xiàn)在正走向一個更加平穩(wěn)的時期,但我深知未來還會有其他動蕩。
Garry Tan:現(xiàn)在OpenAI是如何運作的?
Sam Altman:這是我第一次感覺我們真的知道該做什么。實現(xiàn)AGI還需要大量的工作,存在一些已知或未知的因素,但我們基本上知道該做什么。這需要花時間,也很困難,但非常令人興奮。
我認(rèn)為在產(chǎn)品方面還有更多需要解決的問題。但大體上我們知道要目標(biāo)是什么以及要優(yōu)化什么,這是一個非常激動人心的時刻。當(dāng)你擁有這樣清晰的認(rèn)知時,我認(rèn)為你可以走得相當(dāng)快。我們的研究路徑、基礎(chǔ)設(shè)施路徑已經(jīng)很清晰,產(chǎn)品路徑也越來越清晰。我們曾經(jīng)是一個真正的研究實驗室,很長一段時間都沒有這樣的認(rèn)知。即便你知曉了這些方向,實際操作中也很難下定決心,因為總有太多你渴望嘗試的事情。但你能讓每個人都目標(biāo)一致并攜手共進(jìn)的程度,是公司發(fā)展速度的重要決定因素。
五、AGI嚴(yán)重過載,一個人加一萬個GPU創(chuàng)造十億美元年營收
Garry Tan:在剛結(jié)束的o1黑客馬拉松上,獲勝者之一Camphor構(gòu)建了能夠不斷迭代優(yōu)化翼型的系統(tǒng),這聽起來有點像AGI第四級,也就是創(chuàng)新者階段。
Sam Altman:這很有趣。我以前認(rèn)為,從二級躍升到三級很快就會發(fā)生,但三級到四級的跳躍會更加困難,需要一些中型或更大模型的想法。但他們和一些其他的演示讓我相信,只要以非常有創(chuàng)意的方式使用現(xiàn)有模型,就可以獲得大量的創(chuàng)新。
Garry Tan:你想簡單談?wù)劦谌、第四級和第五級嗎?br/>
Sam Altman:我們意識到AGI已經(jīng)變成了一個嚴(yán)重過載的詞,人們對它的理解各不相同。我們試圖簡單地列出一個框架,這大概是我們對事物發(fā)展順序的最佳推測。你有一級系統(tǒng),也就是聊天機(jī)器人,就會有二級系統(tǒng),也就是推理者。我們認(rèn)為今年早些時候發(fā)布的o1已經(jīng)達(dá)到了第二級。
第三級是指的AI Agent,它擁有能夠完成長期任務(wù)的能力,比如與環(huán)境多次互動,并與人類協(xié)同工作。我認(rèn)為我們會比人們預(yù)期的更快到達(dá)第三級。至于第四級創(chuàng)新者,它就像科學(xué)家一樣,能夠探索長期以來不太被知曉的現(xiàn)象并理解其本質(zhì)。然后是第五級,這還沒有成型的定義,但它將為整個公司的規(guī)模、組織架構(gòu)或其它任何方面帶來巨變。
Garry Tan:第五級AGI聽起來像是一個組織(Organizations)。比如說,會有一些公司每年賺取數(shù)十億美元,但員工不到100人,可能是50人,可能是20人,可能是1人。
Sam Altman:我不知道怎么樣去說,但我確實感覺到了這個趨勢。現(xiàn)在是創(chuàng)業(yè)公司創(chuàng)始人的好時機(jī)。這就像一個人加一萬個GPU,然后它就發(fā)生了。
六、新技術(shù)平臺被夸贊很容易,但不要為此沉淪
Garry Tan:對于即將開始或剛剛開始創(chuàng)業(yè)的人,你有什么建議?
Sam Altman:押注這種技術(shù)趨勢。我們還沒有接近飽和點。這些AI模型很快會變得更好。作為創(chuàng)業(yè)公司創(chuàng)始人,你能做什么,以及沒有它你又能做什么,截然不同。而大公司,即使是中等規(guī)模的公司,甚至是成立幾年的初創(chuàng)企業(yè),它們已經(jīng)不再進(jìn)入季度規(guī)劃周期,而谷歌經(jīng)處于十年規(guī)劃階段。
但是你的優(yōu)勢在于速度、專注、信念以及對技術(shù)發(fā)展速度做出反應(yīng)的能力。這是初創(chuàng)公司有史以來的首要優(yōu)勢,尤其是現(xiàn)在。所以我建議你們用AI構(gòu)建一些東西,利用看到新事物并構(gòu)建一些東西的能力,而不是將其放入季度計劃中。
我要說的另一件事是,一個新技術(shù)平臺被夸贊是很容易的事。有一些創(chuàng)業(yè)者可能認(rèn)為:“我正在做一些商業(yè)法則不適用于我的AI。我有這種神奇的技術(shù),所以我不必建造護(hù)城河或競爭優(yōu)勢或更好的產(chǎn)品!边@顯然不是真的。
通過比別人更快地?fù)肀录夹g(shù),你可以在短期內(nèi)得到爆炸性的成長,但記住不要為此沉淪,你仍然需要建立一些具有持久價值的東西。我認(rèn)為這也是一件值得銘記在心的事。
Garry Tan:現(xiàn)在每個人都可以制作一個令人難以置信的演示,但是建立一家企業(yè)仍然艱難。
Sam Altman:規(guī)則同樣適用。你可以比以往更快、更好地做到這一點。但你仍然需要建立良好的業(yè)務(wù)。
Garry Tan:對2025年有什么期待?
Sam Altman:肯定是AGI。但還有另一件更讓我興奮的事,那就是我的孩子。
來源:Y Combinator