編者按:為了防止有朝一日人工智慧的發展會顛覆人類,包括Elon Musk、Reid Hoffman等諸位美國創新型科技行業的風雲人物共同出資超過10億美元,於12月12日宣布成立一家非營利的獨立研究機構——OpenAI。該組織想要實現人工智慧最先進的形態,並將研究結果向公眾公開。Medium專欄作家Steven Levy為此採訪了OpenAI的領導者,看他們如何描述這個計劃和它的未來願景。
本文轉載自微信訂閱號「新智元」,編譯作者為王婉婷和王嘉俊。特此感謝。您可關注「新智元」(Al_era)了解更多人工智慧最前沿資訊。
為了追求人工智慧最先進的形態並將研究結果向公眾公開,他們資助了一個新成立的組織,OpenAI。
像是AI領域的競爭還不夠激烈一樣——要知道Google、Facebook、Microsoft之類的巨頭,甚至還有Toyota這樣的汽車公司,都在急匆匆地招募研究人員——現在又有了一個新的組織渴求研究者,但又有一些不同之處。
它是一個非營利性的合資組織,叫做「OpenAI」。今天它被宣布成立,宣稱將會向公眾公開它所有的研究成果,並且授予它所有的專利買斷式授權(royalty-free,譯者註:用來宣告一項具有版權、專利或著作權的產品能(永久或特定時段)被使用而不需要支付權利金或執照費(License fee),來自維基百科)。這一切都是為了確保有朝一日計算機超越人類智力的可怕前景,將不會變得像一些人恐懼的反烏託邦(dystopia)那樣讓人絕望。OpenAI的資金來自於一群科技行業的權威,包括Elon Musk、Reid Hoffman、Peter Thiel、Jessica Livingston、以及Amazon雲服務。他們承諾,將在未來很長一段時間內向這個組織投入總共超過10億美元的資金。這個組織的聯合董事長分別是Elon Musk和Sam Altman(Y Combinator的CEO)。
眾所周知,Musk是AI的批判者,他加入這樣一個組織並不讓人意外。但Y Combinator是什麼?沒錯,這就是那家10年前從一個夏季計劃中脫胎而出的科技孵化器,當時以給「拉麵工資」、然後反饋美食建議的形式資助了6家初創企業,通過這種方式讓它們能夠快速擴張自己的業務。從那時起,YC已經幫助創立了接近1000家公司,包括Dropbox、Airbnb、以及Stripe,並在最近設立了一個研究部門。過去的2年間,YC一直由Altman領導著。他的公司Loopt曾經是2005年YC初創時孵化的公司之一,在2012年他以4340萬美元的價格出售了這家公司。雖然YC和Altman都是OpenAI的創始人,並且Altman還擔任了聯合董事長的職務,但是OpenAI的確是一個與這些公司無關的、獨立的合資組織。
本質上,OpenAI是一個研究實驗室,旨在削減兩類組織的力量:包括因為擁有營利的超級智能系統(super-intelligence systems)而可能獲得過多力量的大型組織,以及可能使用AI來獲取力量甚至用來壓迫本國公民的政府機構。這可能聽上去非常唐吉坷德,但這個團隊已經募集到了一批精英,包括Stripe前CTO Greg Brockman(他將擔任OpenAI的CTO)以及世界一流的研究者Ilya Sutskever。Ilya Sutskever曾經為Google工作過,是在多倫多接受神經網絡先驅Geoff Hinton指導的年輕科學家團隊的一員。他將擔任OpenAI的研究主管。其他的人馬還有一群頂尖的天賦很高的年輕人,他們的簡歷中囊括了主要的學術團體、Facebook AI以及Google在2014年收購的AI公司DeepMind。OpenAI還有一個星光熠熠的顧問委員會,頂尖的計算機科學家Alan Kay也名列其中。
OpenAI的領導者們對我描述了這個計劃和它的未來願景。整個採訪是分成兩部分進行的,首先是與Altman的對話,然後是與Altman、Musk、以及Brockman一起討論的部分。我將整個訪談融合在一起,編輯成了簡要清晰的格式。
這一切是怎麼來的?
Sam Altman:我們大約是在一個半月以前啟動YC研究部門的,但我一直以來都在思考AI的問題,Elon也是。如果你想想對於世界的未來而言哪些東西最重要,我覺得一個善良的AI(good AI)可能是這張列表上首當其衝的幾項之一。所以我們創立了OpenAI。這個組織正在嘗試研發出一種對人類友好的AI(human positive AI)。而且因為它是一個非營利性組織,全世界都能享用它的研究成果。
Elon Musk:就像你知道的那樣,我對AI有所顧慮已經有一段時間了。我和Sam,和Reid [Hoffman],和Peter Thiel,還有其他人,談了許多次。我們在思考,「有沒有某種方法可以確保——或者提升——AI以有益的方式發展的概率?」作為幾次談話的結果,我們得出了創立一個501c3組織的結論(譯者註:501(c)是美國國內稅收法(Internal Revenue Code, IRC)中的一項條款(美國國內稅收法, § 501(c)),列出了26種享受聯邦所得稅 (federal Income tax)減免的非營利組織,501(c)(3)為宗教、教育、慈善、科學、文學、公共安全測試 (Testing for public safety)、促進業餘體育競爭和防止虐待兒童或動物等七個類型的組織,來自維基百科):一家非營利性組織,不具有讓利潤最大化的義務,可能會是一件不錯的事情。同時,我們也會對安全性非常重視。
那麼從哲學的角度上來說就有了一個重要的元素:我們希望AI能被廣泛傳播。有兩種流派的思想——你是想要AI的數量很多,還是很少?我們認為可能數量多是一件好事。而且從你可以將它作為人類意願的延伸這個方面來看,這也是一件好事。
人類意願?
Musk:就像你自身有一個AI的延伸部分,每個人在本質上都與AI共生、而不是AI作為一個與你無關的大型中央智能(large central intelligence)。想像一下你將會怎麼使用,比如說網絡上的應用:你可以收發郵件、玩轉社交媒體、你的手機上還有許多其它app——它們讓你變成了一個能做很多事的超人,而你並不會認為它們是與你無關的,你會覺得它們是你的延伸。所以我們想要盡力引導AI往這個方向發展。我們已經找到了一些和我們有相似理念的AI領域的工程師和研究者。
Altman:我們認為AI發展的最好方式就是,它應該是關於讓個人變得強大、讓人類的生活變得更好的東西,對於所有人來說都是免費的,而不是一個比其他人類強大一百萬倍的精英。因為我們並不是一個比如Google那樣的追求盈利的公司,我們可以不用關注於如何讓股東們財源滾滾,而是關注於對於人類未來而言,我們相信的、在實際上最好的東西。
Google不是也將它的進展與公眾分享嗎?比如它最近在機器學習領域做的那樣
Altman:他們的確與公眾分享了許多研究成果。隨著時間過去,隨著我們逐漸接近那種超越人類智能的東西,Google還會與公眾分享多少成果是值得懷疑的。
你們在OpenAI中研究的東西不是也會超越人類智能嗎?
Altman:我預期它會,但是它會是開源的,任何人都能使用,而不是只能被,比如說Google,來使用。這個團體研發的任何東西都將對所有人開放。如果你拿去以後做了一些改變、讓它適應其他用途,你也不會有義務要和公眾分享你的成果。但是只要是我們做的任何工作,都會對所有人開放。
如果我是邪惡博士(Dr. Evil),我利用了它,那麼你們不就是在助紂為虐嗎?
Musk:我想這是一個很精彩的問題,我們為這個爭論過不少次。
Altman:關於這個問題有一些不同的思路。就像科幻作品中用「大部分人類都是善良的,而人類的集體力量中可能有一些邪惡的元素」的事實來對抗邪惡博士那樣,我們認為,比起一個單獨的比其他任何東西都強大無數倍的AI,許多許多的AI致力於阻止偶爾出現的邪惡AI,這種可能性要大得多。如果那個強大無比的AI脫離了人類掌控,或者邪惡博士得到了它、沒有東西能與它抗衡,那麼我們就真的落到了很糟糕的境地。
對於OpenAI公布的東西,你們會有監管嗎?
Altman:我們的確希望能夠隨著時間建立起監管機制。一開始將只有Elon和我。我們距離實際開發出真正的AI還有很長很長的距離。但我想我們將會有足夠的時間來建立監管的機制。
Musk:我確實想要將一些時間花在這個團隊上,大概會是每周在辦公室花上一兩個下午的時間來了解研究進展、提供我的想法和反饋,對於AI的現狀和我們是否在接近一種危險的東西有一些更深的理解。我個人將會對安全性極其敏感,我對這個問題有許多顧慮。如果我們看到了某種我們認為在安全性上有風險的東西,我們會將其公之於眾。
什麼是邪惡的人工智慧(Bad AI),能舉個例子麼?
Altman:實際上,邪惡的人工智慧基本都和科幻小說描繪的差不多,但像終結者那樣的人工智慧技術,還需要一段時間才能出現。我在短期內絲毫不擔心它們。不過有一件事我的確認為是挑戰:自動化的普及,以及工作被機器人取代。另一個邪惡的人工智慧例子是,人工智慧程序能夠像黑客那樣進入電腦,而且這方面要遠比人類強大。這些事現在已經發生了。
你的系統已經建立好了嗎?
Altman:還沒有,開始會像研究實驗室那樣,而且在長期的時間裡,也都會以這樣的形式存在。現在我們還不知道怎麼去建造這個系統。從第一天開始,我們有了 8 名研究者,未來幾個月還會有更多人加入。現在他們會使用 YC 孵化器的辦公空間,當他們逐漸成長後才會搬出去獨立辦公。他們也會不斷演練想法,編寫程序來看是否能加速現在人工智慧技術的進展。
組織外的人,可以加入到項目中麼?
Altman:當然可以了。我們把項目以完全開放的形式進行,自由分享信息,這樣的好處是能和任何人合作。你很難和 Google 的員工合作,因為他們有一大堆保密條款。
Sam,既然 Open AI 會最早入駐 YC 孵化器,你的創業公司們會參與到 Open AI 的工作麼?(更正:Altman 現在告訴我說,辦公室會在舊金山。)
Altman:如果 OpenAI 的確開發了不錯的技術,而且所有人都可以免費使用並造福於科技公司。不過也僅僅是這樣了。但我們會詢問 YC 孵化器的公司們,在自願的情況下開放合適的數據給 OpenAI。Elon Musk 也在考慮 Tesla 和 Space X 公司能分享哪些數據。
你們會分享什麼類型的數據?
Altman:這有很多。例如說所有的 Reddit 數據都會是非常有用的訓練集。你也可以想像,所有的特斯拉自動駕駛視頻也會變得很有價值。大量的數據的確很重要。如果你思考人類如何變得聰明,當你讀書的時候,你變得聰明,當我讀書的時候,我變得聰明。但是我並不會因為你讀書而變得聰明,反過來也一樣。但是使用特斯拉作為例子,當一輛特斯拉學會新的習慣,那麼所有的特斯拉都會立刻從它的智能獲得收益。
Musk:實話說我們並沒有非常詳細的專門計劃,因為它還處在公司非常初創的階段。這是一種萌芽期的狀態。但確信的是,特斯拉會有大量的數據,關於真實世界的數據,因為我們的輪子每年都會積累幾百萬的公裡數。也許特斯拉相比世界上任何其他的公司,都有更多的真實世界數據。
Tesla CEO 和產品架構師 Elon Musk,YC 孵化器主席 Sam Altman
AI 需要大量的計算能力。你們打算怎麼部署基礎設施?
Altman:我們正和亞馬遜雲服務合作,他們為項目捐獻了大量的基礎設施服務。
你們要向項目投資 10 億美元?
Musk:我得說最後的資金投資會超過 10 億美元。我們並不想出具詳細的資金來源統計分析,但是我們在博客中提到了為項目做出傑出貢獻的人。
這個項目會持續多久?
Altman:這取決於它需要多長時間建立起來。我們會儘可能的節儉,但這也許是幾十年的項目,需要很多人參與,也需要很多的硬體設施。
而你們不需要去賺錢?
Musk:對的。這不是利益取向的投資。也許它未來能夠產生收入,就像斯坦福實驗室 501c3 項目一樣。所以未來也許會有收入,但不會有利潤給股份持有者分紅,也不會有股票價格或其他任何可以獲利的東西。我們認為這樣會比較好。
Elon,你在早些時間投資了人工智慧公司 DeepMind,而現在似乎是相同的理由,來確保人工智慧受到監督。然後 Google 收購了 DeepMind,這是你的第二次嘗試麼?
Musk:我得強調,我並不是通常意義的投資者。我不尋求投資和財務上的回報。我給自己參與創立的公司投資,有時候是出於幫助朋友,有時候是因為我的信仰,也有的時候是因為我關心的事情。我並不是出於分散風險或者物質意義上的考慮。不過,我對 DeepMind 所謂的投資,不過是為了更好的理解人工智慧,並且能夠時刻看到它的進展。
你們現在要和 DeepMind、Facebook 和微軟競爭最好的科研人員麼?
Altman:我們的招聘計劃進展的不錯。對科研人員真正有吸引力的是自由度和開放性,以及分享他們研究項目的許可程度,但是在產業實驗室裡面,你很難達到相同的權限。我們得以吸引力非常高質量的初創團隊,而其他人會想著加入,以和這樣的團隊一起工作。最後我認為,我們的使命、願景和管理架構真的對人們有吸引力。
你們最終會僱傭多少人?一百多?
Altman:也許吧。
我得回到最初的想法,通過把人工智慧分享出去,我們或許可以避免它最糟糕的結果。但是把人工智慧變得可以公開獲得,是否會增加它的潛在危險?
Altman:我和 Elon Musk 以及其他人就這個問題討論了很長的時間,不過我到現在都不是 100% 的確定。你永遠也不可能 100% 確定,不是麼?不過我們可以有不同的劇本,通過加密技術來保障安全,通常不怎麼管用。如果只有一個機構能有這樣的技術,你怎麼決定它應該是 Google、美國政府、中國政府、ISIS 或其他?世界上有很多邪惡的人,但人類卻依然生生不息。但是,如果其中某個壞人擁有了超出其他人類 10 億倍的能力,那世界將會怎樣?
Musk:我認為抵抗AI錯誤使用的最好辦法,就是讓人們儘可能去擁有AI。如果每個人都有AI的力量,那就不會有個人或小團體擁有AI的超級力量。
Elon,你是兩個公司的CEO和一家公司的董事長。你還有足夠的時間投入到新項目麼?
Musk:那確實。但我心裡一直都在考慮AI的安全性,所以我還是應該做個交易換來心靈平靜。