周鴻禕稱Sora生成視頻堪比CG:未做3D建模 隻需文字就可逼真描繪


今日,周鴻禕再次談到Sora視頻模型,他表示Sora生成視頻堪比CG。周鴻禕發視頻稱,Sora有三個片段讓他覺得非常驚訝。其中一個是一堆金毛小狗在雪地裡打滾兒,狗狗用鼻子拱雪,甚至一粒一粒的雪粒都能感覺到,他感覺這個畫面非常真實。

他認為,對比Pika和Runway是做不出這樣效果的。Pika和Runbway實際上是基於圖形圖像本身的操作來進行生成。隻是形成一種比較簡單的計算機動畫的效果。

周鴻禕說:“即使是用常規呢計算機CG電影工業特效來看這三個畫面,那也會非常難做,但是到Sora這裡,這些細節都會變得非常簡單,隻要給出一些文字的提示要求,就能逼真描繪出來”。

他認為,Sora是沒有做3D建模的。如果Sora也隻是用3D建模再進行渲染,那麼這和傳統的電影工業走的是一樣的路,這樣就不具備顛覆性和革命性。

周鴻禕猜測Sora做到如此效果有三點原因:

1、Sora模擬人類觀察、描繪、表現世界的方法。如果人類畫師用筆畫出來這三個場景,人類的大腦裡不需要3D建模,因為人類對世界有基本認知。人類可以隨意想象出自己要做的事,可以控制自己所想。

2、Sora在學習的過程中,用很多視頻、電影的內容來作為訓練輸入。當輸入一些畫面,不僅要解讀出畫面的元素,還要解讀出一些物理定律。

openAI的論文中曾提到recaptioning技術,意思是對每一幀畫面都能夠用文字來描述。這點也正符合人類認知世界的方法。

3、openAI產生很多3D內容。不排除它用現在遊戲引擎做很多實時3D模型的渲染,再利用這些3D模型把更多的物理知識訓練給Sora。

周鴻禕表示,Sora是記錄文生視頻AIGC的工具,它反映AI對世界的理解,是從文字進入圖像,再從圖像展示對這個世界3D模型的理解。


相關推薦

2024-02-18

如何將不同類型的視覺數據轉化為統一的格式,以便於對生成模型進行大規模訓練的方法;(2)對Sora的能力和局限性的定性評價。不過遺憾的是,報告不包括模型和實現細節。嗯,OpenAI還是那個“OpenAI”。就連馬斯克都被Sora生

2024-02-18

如何將不同類型的視覺數據轉化為統一的格式,以便於對生成模型進行大規模訓練的方法;(2)對Sora的能力和局限性的定性評價。不過遺憾的是,報告不包括模型和實現細節。嗯,OpenAI還是那個“OpenAI”。就連馬斯克都被Sora生

2024-02-17

如何將不同類型的視覺數據轉化為統一的格式,以便於對生成模型進行大規模訓練的方法;(2)對Sora的能力和局限性的定性評價。不過遺憾的是,報告不包括模型和實現細節。嗯,OpenAI還是那個“OpenAI”。就連馬斯克都被Sora生

2024-02-17

如何將不同類型的視覺數據轉化為統一的格式,以便於對生成模型進行大規模訓練的方法;(2)對Sora的能力和局限性的定性評價。不過遺憾的是,報告不包括模型和實現細節。嗯,OpenAI還是那個“OpenAI”。就連馬斯克都被Sora生

2024-05-01

D:infoqchina),作者:凌,授權站長之傢轉載發佈。1視頻生成模型“新王登基”,Sora 何以成為全球焦點?2023年以來,多模態視頻生成技術取得顯著的進展和突破,從 Runway 到 Pika 再到年末的 VideoPoet,視頻生成模型進入到加速階

2024-03-09

快科技3月8日消息,據媒體報道,360集團創始人周鴻禕表示,人工智能將引領一場新工業革命,並且深刻影響各行各業。周鴻禕稱,企業應當抓住機遇All in AI,這其中包括三大心法,從而做好準備。一是建立AI信仰,相信大模型

2024-02-20

周鴻禕又口出狂言。他說,“AGI(通用人工智能)的實現將從10年縮短到1年”,而背後的原因,僅僅是因為一個1分鐘的短視頻。註意看,這個女人叫小美,她正向我們走來。雖然身處日本某條熱鬧的大街,小美卻總是不停地回

2024-02-17

nAI公開的演示視頻來看效果非常超現實。昨日,360董事長周鴻禕在微博發文,談到OpenAI的文字轉視頻模型Sora。他認為:Sora意味著AGI實現將從10年縮短到1年。周鴻禕表示,AI不一定那麼快顛覆所有行業,但它能激發更多人的創作

2024-02-27

樣。。與此同時,國內各路大佬也紛紛出來吃瓜。360 的周鴻禕在第一時間銳評:Sora 意味著實現通用人工智能的時間將縮短。緊跟時事的周鴻禕似乎對 Sora 有點上頭,從 2 月 16 號 Sora 發佈後到成稿前,他一共發佈 15 條微博,其

2024-02-23

今日,360周鴻禕在接受采訪時談到近期網絡熱議的AI課程收費問題。他表示,AI科普有很大需求,李一舟通過AI課程收費獲得很高收入,是因為他從用戶的角度捕捉到用戶的需求。“李一舟最大的問題是不該對相關課程收費,應該

2024-02-18

以通過在適當大小的網格中安排隨機初始化的patch來控制生成的視頻的大小。UNet並不直接提供這種靈活性。猜測:Sora可能還會使用Google的Patch n‘Pack(Navit),以使DIT能夠適應不同的分辨率/持續時間/長寬比。其次,可擴展性是DI

2023-11-29

日前新東方創始人俞敏洪在其公眾號發佈對話周鴻禕的視頻及文字版,其中提到360安全軟件的一些問題,例如360廣告非常多以及360無法卸載等。針對這些問題周鴻禕進行回應,第一個問題是怎麼用360卸載360,是不是裝360就沒辦法

2024-02-16

OpenAI新推出的首個視頻生成模型-視頻生成模型索拉(Sora)可以完成一些真正令人印象深刻的影片生成壯舉。不過,至少從今天晚上發表的一篇技術論文來看,這個模型比OpenAI最初想象的還要厲害。這篇題為《作為世界模擬器的

2024-02-26

出世引發關於中美AI差距是否進一步加大的熱議。360公司周鴻禕指出,盡管國內大模型發展水平接近GPT-3.5,但與GPT-4.0相比仍存在一年半左右的差距。周鴻禕認為,OpenAI可能還握有未公開的秘密武器,“中國跟美國的AI差距可能還