首個國產單池萬卡液冷算力集群正式啟用!可滿足萬億級參數大模型訓練


快科技3月24日消息,中國電信官方宣佈,首個國產單池萬卡液冷算力集群天翼雲上海臨港國產萬卡算力池正式啟用,首批用戶也同時入駐。

據介紹,這不僅是國內首個投入正式運營的國產單池萬卡液冷算力集群,也是業內領先的全國產化雲智一體公共智算中心

該集群采用新一代國產AI算力,通過高速RDMA連接各物理機節點,提供低延時、高吞吐量、無損通信網絡和強大的並行計算能力,多項技術指標領跑全國。

該集群還最高可支持萬億參數大模型,滿足AI計算、深度學習、圖形渲染等復雜訓練任務對算力的要求。

有機構認為,雙碳背景下,IDC綠色化是大勢所趨,液冷或是散熱技術演變的必經之路,隨著PUE要求不斷嚴格,液冷散熱優勢逐漸凸顯,無論是IDC新建需求還是存量改造需求,液冷均有望成為首選。


相關推薦

2024-08-31

正式運營。據悉,該智算中心具有單集群算力規模最大、國產化網絡設備組網規模最大等特點。單集群智算中心把所有AI加速卡打造成1個集群,用以支持千萬億級參數的大模型進行訓練。這個集群智算中心通過先進的智算網絡技

2023-11-10

英偉達似乎並沒有放棄中國巨大的 AI 算力市場。那麼,國產芯片是否可以替代?經過測試,目前在大模型推理方面,國內 AI 芯片910B僅能達到A100的60%-70%左右,集群的模型訓練難以為繼;同時,910B在算力功耗、發熱等方面遠高於

2023-10-15

理成本的結果。而文心大模型4.0作為單一模型,將是國內首個萬卡集群訓練的稠密參數大語言模型。萬卡集群背後,如何更好的發揮性能呢?對於百度來講,恰好因為過去十年如一日的技術投入,正式因為文心與飛槳的聯合優化

2023-10-09

的底層基礎打模型,就是一場巨頭的遊戲。根據IDC發佈的首個大模型評估報告《AI大模型技術能力評估報告,2023》,百度文心大模型3.5拿下12項指標的7個滿分,綜合評分第一,算法模型第一,行業覆蓋第一,綜合能力在眾多國產

2024-04-10

最高功耗800W,可滿足大規模語言模型、生成式AI模型的強算力需求。新一代的Gaudi 3面向AI訓練和推理,升級為臺積電5nm工藝,帶來2倍的FP8 AI算力、4倍的BF16 AI算力、2倍的網絡帶寬、1.5倍的內存帶寬。對比NVIDIA H100,它在流行LLM上

2023-09-23

性能算子。汪濤表示,隨著人工智能進入大模型時代,大算力正在成為人工智能發展的核心引擎。華為改變傳統的服務器堆疊模式,以系統架構創新打造AI集群,實現算力、運力、存力的一體化設計,突破大算力瓶頸。

2024-06-19

能研究院(TeleAI)聯合北京智源人工智能研究院發佈全球首個單體稠密萬億參數語義模型Tele-FLM-1T,成為國內首批發佈稠密萬億參數大模型的機構。面對大模型訓練過程中算力消耗巨大的挑戰,TeleAI與智源通過深度研發,結合模

2024-04-01

是第一傢接入無問芯穹並成功完成千卡級別大模型訓練的國產GPU公司,“誇娥”(KUAE)集群已經與無穹Infini-AI順利完成系統級融合適配,並完成LLama2 700億參數大模型的訓練測試。“誇娥”集群基於雙路八卡GPU服務器MCCX D800,每個

2024-03-14

x86 計算上,以提供優化的人工智能芯片。由於這是一個液冷數據中心,因此風冷 HPE 服務器配備來自 Legrand 子品牌 ColdLogik 的後門熱交換器設置。這是 Cerebras 如何利用液冷設施的一個很好的例子,但它不必為每個服務器節點配

2024-06-27

應用。據劉慶峰介紹,星火大模型V4.0的訓練依托於國內首個國產萬卡算力集群飛星一號”,實現七大核心能力的全面升級。星火大模型V4.0不僅在8個國際主流測試中名列榜首,領先於國內其他大模型,而且其能力已全面匹敵GPT-4

2023-02-13

發佈GPT-3.5,也就是如今的ChatGPT。微軟的AI大模型及強大算力是助力OpenAI的關鍵,OpenAI曾為讓GPT-3的表現更接近人類,用45TB的數據量、近1萬億個單詞來訓練它,大概是1351萬本牛津詞典。大模型及其高算力對應的是高昂的資金消耗

2024-06-27

越。科大訊飛董事長劉慶峰介紹,訊飛星火V4.0基於全國首個國產萬卡算力集群飛星一號”訓練而成。在談及OpenAI API斷供中國時,劉慶峰表示,在這個背景下,我們風起雲湧的通用人工智能浪潮,到底有沒有國傢底座的一個支撐

2024-03-19

規模部署:GB200 NVL72設計可以將36個CPU和72個GPU集成到一個液冷機架中,提供總共720 petaflops的AI訓練性能或1.4 exaflops的推理性能。支持大型模型:單個NVL72機架可以支持高達27萬億參數的模型,而且有意思的是,黃仁勛似乎透露一

2023-05-28

卡”。今年4月,知乎發佈大語言模型“知海圖AI”並內測首個站內大模型應用功能“熱榜摘要”。一個月後,知乎帶來又一款站內的大模型應用功能“搜索聚合”。該產品將大模型能力應用到知乎搜索上,每當用戶觸發搜索時,