“超級智能幾周，相當于人類幾十億年”！OpenAI被解雇員工驚人預警：超級智能将造成大動蕩

每日經濟新聞

2024-06-20 20:17釋出于四川每日經濟新聞官方賬号

每經編輯：張錦河,宋欣悅

2024年4月，前OpenAI超級對齊部門成員、利奧波德·阿申布倫納（Leopold Aschenbrenner）被OpenAI以洩露公司機密為由解雇。6月初，阿申布倫納在網站上釋出了一份長達165頁的PDF檔案，檔案彙總了他在OpenAI工作期間所了解的資訊，深入探讨了目前AI技術的進展、從人工通用智能（AGI）到超級智能（Superintelligence）的發展路徑等問題。

圖檔來源：X

6月初，利奧波德·阿申布倫納在部落格節目Dwarkesh Podcast中，透露他被開除的真實原因——他給幾位董事會成員分享了一份OpenAI安全備忘錄，結果導緻OpenAI管理層不滿。同日，阿申布倫納在社交平台上，釋出了一份長達165頁的PDF文檔。

圖檔來源：X

阿申布倫納将他的這份檔案命名為《态勢感覺》（Situational Awareness）。在檔案的開頭，他特别指出，雖然自己曾在OpenAI工作，但自己的預測都是基于公開資訊、自己的想法、工作期間的八卦等。他還在這份檔案的開頭特别緻敬了前OpenAI首席科學家伊爾亞·蘇茨克維（Ilya Sutskever）和其他OpenAI超級對齊團隊的成員。

他認為目前全世界隻有僅僅幾百人對AI的發展有真正意義上的感覺，這些人大多集中在舊金山地區以及全球各地的AI實驗室裡，自己便是這幾百人中的一員。而那些主流評論家們隻看到了炒作和正常的商業模式，他們認為這不過是另一場網際網路規模的技術變革。

圖檔來源：《态勢感覺》

阿申布倫納在文章中指出，AI的進步不會止步于人類水準。例如，在最初學習了人類最好的棋局之後，AlphaGo開始與自己對弈，它很快實作了超越人類的水準，下出了人類永遠無法想出的極具創意和複雜性的棋步。

在實作AGI後，人類将能夠利用先進的AGI系統實作自動化的AI研究，将十年的算法進步壓縮到一年内。這意味着我們将迅速從人類水準的AI系統過渡到遠超人類的超級智能系統。這可能會将人類10年的算法進展壓縮到不到1年的時間裡。與現有領先的AI實驗室的數百名研究人員和工程師相比，未來的AI實驗室可能會擁有成千上萬個AGI系統，夜以繼日地努力實作算法突破，不斷自我完善，加速算法進步的現有趨勢。

圖檔來源：《态勢感覺》

他寫道：“超級智能的力量和危險将是戲劇性的。”這種轉變不僅會帶來技術上的飛躍，還将引發一系列倫理和安全問題。

阿申布倫納強調，通過一些新的創新，超級智能在幾周内就能獲得相當于人類數十億年的經驗。這種前所未有的學習速度将使超級智能在數量和品質上遠超人類。他指出：“這些AI系統将能夠以我們無法想象的速度進行思考和學習。”

阿申布倫納預測，到本世紀末，我們将擁有數以億計的超級智能，這些智能體将在數量和品質上遠超人類。他寫道：“在數以億計的GPU上運作的超級智能，将能夠比人類快幾個數量級地‘思考’。”這種超級智能的湧現将帶來巨大的技術進步，但也伴随着巨大的風險。

圖檔來源：《态勢感覺》

文章中最引人注目的觀點之一是，十億超級智能将能夠将人類研究人員在下個世紀進行的研發工作壓縮到幾年内。這種壓縮效應将極大地加速技術進步，但也可能帶來難以預見的後果。

阿申布倫納指出：“超級智能将是人類有史以來最強大的技術——也是最強大的武器。它将賦予軍事上決定性的優勢，或許隻有核武器可以相比。”

阿申布倫納強調，智能爆炸和其直接後果将帶來人類曆史上最為動蕩和緊張的局面。他指出：“在這個初期階段，人類的任務将不是制造酷炫的産品，而是要盡一切可能度過這一時期。”他呼籲建立一個能夠嚴肅對待這些困難抉擇的指揮鍊，以穩定國際局勢并管理智能爆炸期間的風險。

他進一步提到，盡管對齊技術可能會被濫用，但我們仍需要更好的對齊技術來確定未來模型的基本限制，如遵循指令或遵守法律。這些技術不僅僅是為了防止濫用，更是為了確定AI能夠在安全的架構内運作。

展望未來，阿申布倫納認為，我們正處于一個前所未有的快速發展時期，預計在未來四年内，計算能力将再提升約10萬倍，帶來類似于GPT-2到GPT-4的質的飛躍。他指出，這不僅意味着更好的聊天機器人，更意味着從工具到代理的轉變，從一個簡單的工具到一個更像是遠端助手的存在。

每日經濟新聞綜合自公開資訊

每日經濟新聞

檢視原圖 13K

• 

• 

• 

• 

•