天工大模型3.0即將發佈:同步開源4000億參數MoE超級模型


快科技4月1日消息,據昆侖萬維官微發文,天工大模型3.0將於4月17日正式發佈,並同步開源4000億參數MoE超級模型。

這一模型采用4千億級參數MoE混合專傢模型,是全球模型參數最大、性能最強的MoE模型之一。

相較於上一代天工2.0”MoE大模型,天工3.0在多個領域均展現驚人的性能提升。其在模型語義理解邏輯推理、通用性、泛化性、不確定性知識、學習能力等領域均有顯著的提升。具體而言,模型技術知識能力提升超過20%,數學、推理、代碼、文創等能力也提升超過30%。

天工3.0新增多項功能,如搜索增強、研究模式、調用代碼及繪制圖表、多次調用聯網搜索等。同時,它還針對性地訓練模型的Agent能力,使得天工3.0能夠獨立完成規劃、調用、組合外部工具及信息,從而能夠精準高效地完成各類復雜需求,如產業分析、產品對比等,為用戶帶來全新的顛覆式人工智能體驗。

天工3.0是一個多模態超級模型”,它集成AI搜索、AI寫作、AI長文本閱讀、AI對話、AI語音合成、AI圖片生成、AI漫畫創作、AI圖片識別、AI音樂生成、AI代碼寫作、AI表格生成等多項能力,可以說是大模型時代的超級應用”。

特別值得一提的是,天工3.0中的AI音樂生成大模型SkyMusic還將在4月2日面向社會開啟邀測,這無疑將進一步展示天工3.0在創新和應用方面的強大實力。

總的來說,天工大模型3.0的發佈和開源,無疑將推動人工智能領域的技術進步和應用創新,為產業界和學術界帶來全新的機遇和挑戰。


相關推薦

2024-03-18

6個月掏出3410億參數自研大模型,馬斯克說到做到!就在剛剛,馬斯克的AI創企xAI正式發佈此前備受期待大模型Grok-1,其參數量達到3140億,遠超OpenAIGPT-3.5的1750億。這是迄今參數量最大的開源大語言模型,遵照Apache2.0協議開放模

2024-04-17

2024 年 4 月 17 日宣佈,其最新研發的「天工3.0」基座大模型和「天工SkyMusic」音樂大模型現已開啟公測。這兩款產品的發佈,標志著昆侖萬維在人工智能領域的技術實力和創新能力再次得到顯著提升。(天工SkyMusic下載地址見文

2024-03-18

似乎是為表明自己始終堅持對AI模型開源,馬斯克做出與阿爾特曼全然不同的選擇。3月17日,馬斯克宣佈開源Grok-1,這使得Grok-1成為當前參數量最大的開源大語言模型,擁有3140億參數,遠超OpenAIGPT-3.5的1750億。有意思的是,Grok-1

2024-03-18

消息,據媒體報道,馬斯克的AI創企xAI正式宣佈其大語言模型Grok-1已實現開源,並向公眾開放下載。據解,Grok-1是一款基於混合專傢系統(Mixture-of-Experts,MoE)技術構建的大語言模型,擁有3140億參數,遠超OpenAI GPT-3.5的1750億。這

2023-11-10

銘發表講話。吳泳銘表示,阿裡巴巴即將開源720億參數大模型,這將是國內參數規模最大的開源大模型。這已經不是阿裡首次開源大模型,在今年8月份,阿裡上架兩款開源模型Qwen-7B和Qwen-7B-Chat,分別是通義千問70億參數通用模

2024-06-19

智源人工智能研究院發佈全球首個單體稠密萬億參數語義模型Tele-FLM-1T,成為國內首批發佈稠密萬億參數大模型的機構。面對大模型訓練過程中算力消耗巨大的挑戰,TeleAI與智源通過深度研發,結合模型生長和損失預測等關鍵技

2024-02-22

昨日晚間,Google毫無預兆地發佈開源模型Gemma,直接狙擊Llama2,繼通過Gemini拳打OpenAI後,試圖用Gemma腳踢Meta。不同於Gemini的“全傢桶”路線,Gemma主打輕量級、高性能,有20億、70億兩種參數規模,能在筆記本電腦、臺式機、物聯

2024-02-22

幾傢巨頭之間的大模型競爭,越來越像打牌。你出完炸彈我出炸彈。這不,又一個深夜炸彈。2月21日,在與閉源的OpenAI打得火熱的同時,Google突然加入開源的戰局。北京時間夜間Google突然宣佈,開源一個新的模型系列Gemma,這個

2023-07-08

復旦大學教授邱錫鵬、普林斯頓大學教授王夢迪、南洋理工大學助理教授潘新鋼、微軟研究院高級研究員楊健偉以及上海AI實驗室青年科學傢戴勃展開以“大模型驅動的交互新范式”為主題的圓桌討論。人工智能如何賦能科學研

2024-03-21

表示:“通用計算已經失去動力,現在我們需要更大的AI模型,更大的GPU,需要將更多GPU堆疊在一起。這不是為降低成本,而是為擴大規模。”作為GTC大會的核心,英偉達發佈Blackwell GPU,它分為B200和GB200系列,後者集成1個Grace CP

2023-04-20

創業公司StabilityAI宣佈,發佈並開源該團隊訓練的大語言模型StableLM。根據該團隊的公告,目前StableLM的“阿爾法版本”中擁有30億和70億參數的模型已經可以從GitHub等開源平臺上下載,後續還將推出150億至650億參數的版本。(來

2024-04-01

近日,無問芯穹發佈“無穹Infini-AI”大模型開發與服務平臺,並宣佈與摩爾線程達成深度戰略合作。無穹Infini-AI基於無問芯穹的智算雲平臺,可服務生成式大模型的多種場應用落地,為應用開發者提供高性能、易上手、安全可靠

2023-12-07

潔的圍棋大戰,最近最火爆的當然是ChatGPT引發的大語言模型、生成式AI浪潮。坦白說,大語言模型眼下似乎有些過熱,但從技術和前景的角度而言,AI絕對是未來,不管它以什麼形勢體現,這都是大勢所趨,也是一個龐大的市場

2024-04-19

件大事:Meta正式發佈他們迄今最強的新一代開源大語言模型Llama3。首批發佈的Llama38B和Llama370B包括預訓練和指令微調版本,8K上下文,在兩個24KGPU定制集群上使用15萬億tokens數據訓練而成,Meta稱它們分別是80億和700億參數上最好