近幾個月來,OpenAI ChatGPT 的強大生成式對話能力引發了人們對 AI 的新興趣和投資。隨著國內外掀起類 ChatGPT 研發熱潮,對話式 AI 及背後的大模型被更多人看好。
但上週在 MIT 的視訊演講中,OpenAI CEO Sam Altman 發表了另一番言論。他警告稱,誕生 ChatGPT 的研究策略已經結束。至於未來會在哪些方面出現進展尚不清楚。
過去幾年,OpenAI 透過採用現有機器學習演算法並將它們擴展到以往無法想像的規模,在與語言相關的人工智慧領域取得了一系列引人注目的進展。其中作為最新的進展,GPT-4 可能使用數萬億文字單字和數千個強大的電腦晶片訓練。
GPT-4 在語言、數學、程式設計、視覺、醫學、法律和心理學等多種任務上都有出色的表現。 Sam Altman 卻對此表示,讓模型變得更大(例如巨型模型)將不會進一步帶來新進展。
Sam Altman 的這番言論表明,在開發和部署新AI 演算法的競賽中出現了一個意想不到的轉折。自去年 11 月 ChatGPT 推出以來,微軟利用底層技術在必應搜尋中加入了基於它的聊天機器人,Google也推出 Bard 競賽。很多人急著嘗試使用新型聊天機器人來幫助完成工作或個人任務。
同時,包括 Anthropic、AI21、Cohere 和 Character.AI 在內眾多資金雄厚的新創公司都投入大量資源來建立規模更大的演算法,以努力追趕 OpenAI。
不過,Sam Altman 的話似乎預示著,GPT-4 可能是 OpenAI 研發更大模型並餵給它們更多數據這一戰略的最後一個重大進展。這也可以從他親自闢謠 GPT-5 的相關傳聞中看出一些端倪,他表示目前沒有訓練 GPT-5,短期內也不會訓練。
在描述 GPT-4 的論文中,OpenAI 預估擴展模型規模的效益將出現遞減。 OpenAI 建造資料中心的數量以及建造速度也存在物理限制。
除了大模型設計和架構本身的原因,巨額花費也是一大原因。根據報道,ChatGPT 需要至少 10000 個 GPU 進行訓練,還需要更多資源保證持續運作。而英偉達專為 AI 和高效能運算設計的最新 H100 GPU 單價高達 30,603 美元,無疑成本高昂。 Altman 親自承認,GPT-4 的訓練花費超過了 1 億美元##。
Cohere 的聯合創始人(曾在Google從事AI 工作)Nick Frosst 表示,Altman 的擴大規模並不能永遠奏效的觀點聽起來是對的。他也認為,Transformer(GPT-4 及競品的核心機器學習模型類型)的進展已經超越了擴展範疇。除了在模型中添加更多參數之外,還有很多其他方法可以讓 Transformer 變得更好、更有用。
新的AI 模型設計或架構以及基於人類回饋的進一步微調成為許多研究人員已經在探索的有前景的方向。
馬斯克將AI 專案命名為TruthGPT馬斯克這邊,雖然嘴上說擔憂GPT-4 引發社會問題,並簽署暫停開發比GPT- 4 更強大的系統至少六個月。但實際情況卻是馬斯克正致力於新建一家人工智慧新創公司 X.AI,與 OpenAI 直接展開競爭。
據報道,馬斯克已經從英偉達獲取了上萬塊 GPU,這些系統為人工智慧和高階圖形處理等密集型任務所需的運算提供動力。
馬斯克證實了有關他計劃創建一家人工智慧新創公司,與 ChatGPT 競爭的報導。馬斯克在接受福克斯採訪時宣布了這項計劃,並表示,「我將創建一個稱為TruthGPT 的人工智慧平台,或者說是一個最大限度地尋求真理的人工智慧,可以理解宇宙的本質。我認為這可能是通往(AI)安全的最佳途徑,從某種意義上說,一個關心理解宇宙的人工智慧不太可能滅絕人類,因為我們是宇宙中有趣的一部分。」
馬斯克在訪談中也表示,他相信人工智慧具有毀滅文明的潛力,無論(其力量)多麼小。
此前,馬斯克於 2015 年與 OpenAI 現任 CEO Sam Altman 等人共同創立了 OpenAI,但馬斯克於 2018 年離開了公司董事會。據了解,馬斯克當時聲明的原因是為了避免與特斯拉發生潛在的利益衝突,但後來馬斯克表示還有其他原因,另一個原因是他不同意 OpenAI 團隊在做的一些事情。
另外據 Semafor 3 月份報道,馬斯克曾試圖在 2018 年接任公司 CEO 一職,但在 Altman 和其他人拒絕後便離開了。
自從退出 OpenAI 董事會以來,馬斯克一再批評 OpenAI。就在今年 2 月,他也表示現在的 OpenAI 根本不是他所希望的,並稱 OpenAI 為微軟控制的、閉源、利潤最大化的公司」。
面對馬斯克的多次打擊,Altman 表示即便如此,自己仍將馬斯克視為自己的偶像之一,並表示,「我相信馬斯克確實對AGI安全感到壓力,這是可以理解的。」
#值得一提的是這不是馬斯克第一次考慮打造TruthGPT。他在 2 月曾經發推文說,我們需要的是 TruthGPT。
關於 TruthGPT 的更多細節,馬斯克沒有透漏更多消息,我們可以後續期待一波。
以上是OpenAI CEO:巨型AI模型時代已結束,馬斯克TruthGPT曝光的詳細內容。更多資訊請關注PHP中文網其他相關文章!