高通在移動端演示利用Stable Diffusion技術以最快速度在本地生成AI圖像


高通公司正在展示其在移動領域的人工智能能力,展示其聲稱的人工智能圖像生成器StableDiffusion在智能手機上有史以來最快的部署。在一個演示視頻中,高通公司展示1.5版本的StableDiffusion系統在15秒內生成512x512像素的圖像。雖然高通公司沒有說這是什麼手機,但它表示這是由其旗艦產品驍龍8Gen2(去年11月推出,有一個以人工智能為中心的Hexagon處理器)驅動的。該

運行像Stable Diffusion這樣的程序需要大量的計算能力(它是人工智能圖像生成的主力),大多數在移動端提供此類服務的應用程序在雲端進行所有處理,而不是本地的智能手機或平板電腦,即使在一臺配置較好的筆記本電腦上以這種方式生成圖像也需要幾分鐘,所以在幾秒鐘內從手機上獲得一張512 x 512的圖片是令人印象深刻的。

Screenshot_2023_02_23_at_13.20.35.webp

高通公司在測試設備上生成的更多示例圖像,提示"超級可愛的穿盔甲的絨毛貓戰士,逼真,4K,超詳細,vray渲染,虛幻引擎……"

高通公司聲稱這是一個速度紀錄,該公司介紹說這是Stable Diffusion首次在Android系統上本地運行。之前一篇來自開發者Ivon Huang的博文顯示他們是如何讓Stable Diffusion系統在由高通驍龍865和8GB內存驅動的索尼Xperia 5 II上運行的。不過,正如Huang在一條推文中指出的,用這種設置生成一張512 x 512的圖像需要一個小時。

另一個有用的比較是與iOS的比較。早在12月,蘋果發佈讓Stable Diffusion在其機器學習框架Core ML上本地運行所需的優化。因此,今天為測試該系統,我們通過帶有Core ML加速的Draw Things應用程序,讓Stable Diffusion1.5在iPhone 13上運行。在這種設置下,生成一張512 x 512的圖像需要大約一分鐘,因此,高通公司再次在速度上獲勝,其使用的是較新的硬件和未公開的定制優化包,而iOS的測試是在2021年的手機上使用第三方應用程序完成的。

拋開所有這些限制,高通公司的進步仍然令人印象深刻,即使這隻是一個演示。讓大型人工智能模型在移動設備上本地運行,比依賴雲計算有各種優勢,例如便利性(你不需要移動連接)、成本(當服務器賬單到期時,開發者不會向用戶收費)和隱私(本地運行意味著你不會將數據發送到別人的電腦上)方面。

這是人工智能快速實現產品化的事實,而且它正在快速發生。


相關推薦

2023-04-18

高通在MWC2023大會發佈全球首個運行在Android手機上的Stable Diffusion終端側演示,Stable Diffusion模型參數超過10億,高通利用其AI軟件棧對模型進行量化、編譯和硬件加速優化,使其成功在搭載第二代驍龍8移動平臺的手機上運行。華為

2024-02-23

23日,著名大模型開源平臺stability.ai在官網推出——StableDiffusion3。該版本與StableDiffusion2相比,在文本語義理解、色彩飽和度、圖像構圖、分辨率、類型、質感、對比度等方面大幅度增強,可對標閉源模型Midjourney。Stable Diffusion 3

2023-04-20

當地時間周三(19日),開發AI圖像生成工具StableDiffusion的創業公司StabilityAI宣佈,發佈並開源該團隊訓練的大語言模型StableLM。根據該團隊的公告,目前StableLM的“阿爾法版本”中擁有30億和70億參數的模型已經可以從GitHub等開源

2022-10-05

數模型都能開箱即用。例如,我們采用最近發佈的 Stable Diffusion 模型,並在幾分鐘內讓它在 Dojo 上運行。開箱即用,編譯器能夠以模型並行方式在 25 個 Dojo 模具中進行映射”。Stable Diffusion 模型是一種文本到圖像的深度學習模型

2024-09-06

言處理技術來生成和編輯圖像,由經過精細優化的Stable Diffusion 3.0 AI模型提供支持。Creator Zone利用自然語言處理技術,通過文本描述生成和編輯圖像。它是首款使用最新、最先進的Stability AI模型Stable Diffusion 3.0的PC應用程序。聯想

2024-02-15

新圖像生成模型StableCascade承諾比其業界領先的前身StableDiffusion更快、更強大,而StableDiffusion是許多其他文本到圖像生成AI工具的基礎。Stable Cascade 可以生成照片,並對所創建的圖片進行修改,或嘗試提高現有圖片的分辨率。其他

2023-10-31

接侵權索賠被允許繼續進行,理由是該公司在創建 Stable Diffusion 時未經許可使用受版權保護的圖片。Stability 公司否認將這些圖片存儲並納入其人工智能系統的說法。該公司堅稱,訓練其模型並不包括全盤復制作品,而是從這些

2024-03-24

理者的矛盾。曾一夜爆紅Stability AI 是AI圖像生成器Stable Diffusion背後的公司。2022年8月,Stable Diffusion模型橫空出世,憑借其讓人驚艷的文生圖能力而迅速走紅。在Stable Diffusion發佈幾天後,Stability AI就獲得來自Coatue和Lightspeed公司的

2023-02-27

感受一番AI震撼,那麼2022年下半年以來,自ChatGPT和StableDiffusion掀起的AIGC浪潮,則是令主流互聯網用戶都感受到AI技術有機會帶來的革命。在無數寓言和長達數十年的研究投入後,AI終於要在更大范圍改變世界。(圖源:ChatGPT)

2023-02-27

感受一番AI震撼,那麼2022年下半年以來,自ChatGPT和StableDiffusion掀起的AIGC浪潮,則是令主流互聯網用戶都感受到AI技術有機會帶來的革命。在無數寓言和長達數十年的研究投入後,AI終於要在更大范圍改變世界。(圖源:ChatGPT)

2023-02-27

感受一番AI震撼,那麼2022年下半年以來,自ChatGPT和StableDiffusion掀起的AIGC浪潮,則是令主流互聯網用戶都感受到AI技術有機會帶來的革命。在無數寓言和長達數十年的研究投入後,AI終於要在更大范圍改變世界。(圖源:ChatGPT)

2023-01-16

司大概率會輸。到底有多離譜?例如,起訴書中將Stable Diffusion形容為“一種21世紀的拼貼工具(collage tool)”、“可以重新混合(remix)數百萬藝術傢的版權作品”等等。有網友調侃,連這種簡單的錯誤都會犯,這律師還不如讓C

2023-02-13

是在那個時候,她發現自己的一些作品被用來訓練 Stable Diffusion,這是一種免費的人工智能模型,任何人都可以通過簡單的文字提示就能生成專業品質的圖像。Stable Diffusion 支持幾十個流行的應用,如 Lensa。12 月份,麥柯南寫一

2023-01-05

會性爭議。·目前市場上的主流AI圖像生成系統包括Stable Diffusion、OpenAI的DALL-E 2等等,各具優勢,而谷歌表示旗下的Muse速度遠超主流競品,同樣生成一副512X512級別 畫像,Muse僅需1.3秒,Stable Diffusion1.4卻需要3.7秒。·谷歌表示Muse速