王小川透露OpenAI野心:用1000萬張顯卡訓練AI 10倍於NV年產能


快科技7月24日消息,在生成式AI領域,推出ChatGPT的OpenAI是處於領先地位的,他們的GPT-4已經是萬億參數級別,還在訓練更先進的GPT-5,屆時又會在技術水平上甩開國內的追趕者。

OpenAI能夠領先,先進AI顯卡用到的GPU是功不可沒的,背靠微軟這棵大樹,他們在算力資源上不會受到限制,GPT-4的訓練就使用2萬張NVIDIA的AI顯卡訓練。

但是萬張顯卡級別的算力還不是終點,今年也投身AI創業的前搜狗CEO王小川日前在采訪中透露OpenAI的動向,提到後者正在做更先進的訓練方法,設計能夠將1000萬張GPU連在一起的計算模型。

1000萬張GPU是什麼概念?目前NVIDIA每年的產量也就是100萬塊GPU(應該主要是指AI方面的GPU),OpenAI的規模相當於10倍於NVIDIA年產能的水平。

王小川稱OpenAI的1000萬張GPU算力的目標是登月級別的計劃,顯然認為它很偉大。

不說這些GPU顯卡能不能生產出來,購買花費多少,光是1000萬張顯卡互聯的難度都是不可想象的,OpenAI要是做到就真的無敵於天下。

不過這也非常讓人懷疑OpenAI是否表達錯,還是王小川聽來的投行報告寫錯,從幾萬張GPU到1000萬張GPU的互聯難度可不是一個級別的。


相關推薦

2023-08-07

快科技8月7日消息,盡管OpenAI CEO之前否認,但業界還是相信他們已經在訓練GPT-5大模型,規模將是GPT-4的10倍以上,但這也意味著更燒錢,尤其是用於訓練AI的顯卡極為稀缺。全球這麼多搞AI大模型的,到底用多少AI顯卡是各傢的秘

2022-08-09

從前不久的算力統計上來看,目前全世界大概就有2600多萬張顯卡被用於挖礦。大夥們也可以參考一下,2021年獨立顯卡的全球出貨量大概是5000萬張(僅供參考,畢竟礦卡數是存量,年出貨是流量,互相比較不太嚴謹)。於是乎單

2023-04-16

知乎也在4月13日推出中文大模型“知海圖AI”。另一邊,王小川、王慧文等互聯網大佬的大模型也有新進展。在獲得5000萬美元啟動資金後,4月10日,王小川官宣AI大模型公司“百川智能”;王慧文的 “光年之外”在A 輪融資後估值

2023-10-09

萬億級別。萬卡集群什麼概念?國內之前隻有華為、阿裡透露已建成萬卡AI集群,但我們都沒看到基於它推出的具體模型。萬卡集群就不容易建,如果用起來發揮最大化作用則更難。據分析,正是因為飛槳的深度聯合,才能高效

2023-09-19

上是開源的,大傢缺少的是實際經驗,使用1000張顯卡與1萬張顯卡會產生完全不同的問題,所需的基礎計算中心架構也會有所不同,這些經驗隻能通過實踐來積累。因此,懂得如何構建硬件架構以支持上千甚至上萬張顯卡的人才

2024-04-02

200GPU的TGP甚至高達1000瓦。這些千瓦級 GPU 將出現在擁有數萬張顯卡的數據中心中,從而形成數兆瓦級的設施。為應對國傢電網的負荷,美國總統喬-拜登(Joe Biden)的政府一直在與大型科技公司討論,重新評估他們的電力來源,

2024-03-27

24年第三季度發佈。最近BussinessInsider的報道稱,知情人士透露,GPT-5或將在今年夏天發佈。與FeltSteam預測的時間幾乎吻合。而Arrakis是GPT-5一個更強大的候選者,在多個領域具備人類水平的專業知識能力。GPT-5不是AGI不過,Arrakis並

2023-11-06

本土化的大型語言模型。這次創業使他與包括搜狗創始人王小川在內的其他著名中國科技領袖展開競爭,後者正在迅速聚集人才和風險資本,以建立中國的OpenAI。李開復在接受采訪時解釋創辦 01.AI 背後的動機。"與世界其他

2024-02-10

,重塑全球半導體產業格局。據媒體周五報道,知情人士透露稱,OpenAICEOSamAltman正在與包括阿聯酋在內的投資者進行談判,以籌集數萬億美元資金,旨在提高全球芯片制造能力,更好地推動該公司人工智能發展。其中一位知情人

2024-02-15

億美元的資金,以增加全球半導體芯片的供應。看上去,OpenAI距離AGI(通用人工智能)隻差AI算力。但就像《華爾街日報》一篇報道的標題,籌集數萬億美元可能是 Altman 芯片計劃裡最容易的部分。毋庸置疑,芯片制造是比金錢

2022-06-22

無數好評。地下室實驗引FBI“烏龍”搜查!南大校友用50張顯卡對抗癌癥文 |《中國科學報》實習生 孟凌霄如今,“coolwulf”的方向從癌癥檢測轉移到實際治療方面,並帶著AI診療腦瘤系統回來瞭。“coolwulf”原名薑浩,本科畢業

2024-02-25

星創業中,比如智譜AI的創始人張鵬、百川智能的創始人王小川、從阿裡畢業後投身Infra的賈揚清,以及剛剛獲得中國最大一筆融資的月之暗面楊植麟,無一不出自於清華。他們代表的,是清華的四代創業者。其中我們最熟悉的

2023-06-19

非不可能。”馬斯克可以說是AI技術早期的投資人之一,OpenAI成立都有他的功勞,但是前不久他又參與公開信,甚至要求暫停AI研發,認為ChatGPT和其他大型科技公司開發的聊天機器人存在政治偏見,希望創造出更加中立和尋求真

2024-03-25

亞馬遜、Google、Meta、微軟、OpenAI、特斯拉和xAI。黃仁勛透露,新GPU的價格為3萬到4萬美元,這無疑將進一步推動英偉達的營收。英偉達還推出NIM(英偉達推理微服務),提供從應用軟件到硬件編程的一站式服務,讓開發者可以輕