小米AI識物眼鏡獲黑客馬拉松大賽一等獎 為視障人群提供認路等功能


鳳凰網科技訊 8月6日消息,近日,小米舉辦2023第四屆黑客馬拉松“創想無界,生生不息”大賽,本次大賽產出大量創新思維與先進技術相結合的項目成果,經評審,最終“小米AI識物眼鏡-基於語義理解的視覺系統”獲得一等獎。

“小米AI識物眼鏡-基於語義理解的視覺系統”,以眼鏡為載體搭載視覺識別系統,通過雙目攝像頭,對物品的名稱、距離、位置、顏色,以及文本、人臉等進行多模態識別,為視障人群提供認人、認物、認路、認字等多種功能。項目創新性地將視覺識別模型和大語言模型進行有機結合,讓用戶不僅可以通過自然對話的方式解眼前的世界,更能理解其邏輯關系,向真正“理解世界”又踏出一步。同時,項目也為全尺寸人形仿生機器人CyberOne、以及CyberDog仿生四足機器人理解眼前世界進行前沿探索。

二等獎項目“小米隨心控-基於視覺識別系統的智能控制中心”,關註到言語障礙人群的智能傢居使用體驗。現有智能設備多以手機控制和語音控制這兩種方式來操控,然而語音控制並不利於言語障礙者使用。因此,團隊成員設計這款基於視覺識別系統的全新手勢交互智能中樞,通過深度相機結合手勢控制,計算手掌與設備的空間關系,讓智能設備可以實現“指哪控哪”,以更自然的交互方式讓更多人能夠享受新科技的樂趣。


相關推薦

2024-05-14

多可能性。舉例來說,OpenAI在一段演示視頻中展示與專門為視障人士提供幫助的公司BeMyEyes的合作。他們將GPT-4o植入到一位盲人遊客的手機中,通過手機攝像頭成為盲人的眼睛。這使得盲人能夠得知面前發生的一切,比如白金漢

2023-01-19

的 iOS 、華為的 HarmonyOS 、OPPO的 ColorOS 、vivo的 OriginOS 、小米的 MIUI 和榮耀的 Magic OS ,基本涵蓋到絕大部分使用智能手機的視障用戶。由於我們的測試項目繁多,測試周期長,廠商又會不定期推送更新,所以工程師在 2022年11月

2024-03-03

生的努力下,基於多模態大模型“復旦·眸思”(MouSi)為視障者量身打造的“聽見世界”APP上線,將成為視障人士的生活助手與智能管傢。“聽見世界”App街道行走模式圖。本文圖片均為 復旦大學 供圖2023年上半年,由復旦大

2024-03-04

Google傳奇創始人,千億美元身價的佈林,周末現身AI黑客馬拉松現場。他像個“科技宅”一樣,現場分享關於修復Gemini大模型bug的問題,一下子引起熱議。在將近40分鐘的演講中,佈林談到Gemini開發內幕、AGI、AI對社會影響的看法

2023-10-28

包括手機(即蘋果 iPhone 14、Google Pixel 7、三星 Galaxy S23 和小米 13 Pro)、打印機、無線路由器、網絡附加存儲(NAS)設備、傢庭自動化集線器、監控系統、智能揚聲器以及Google的 Pixel Watch 和 Chromecast 設備,所有這些設備都處於默

2022-08-14

閉GPU業務。沒想到,與銳炫獨顯有關另一件讓人有些大跌眼鏡的事情發生。原來,去年Intel上線XeHPGScavengerHunt活動,說白就是為獨顯宣傳造勢。活動內容包括10個問題,需要前往指定網站回答,並給出特等獎(100名)、一等獎(20

2023-03-29

今年在溫哥華舉行的Pwn2Own黑客大賽向發現和利用許多以前未知的零日安全漏洞的研究人員頒發超過100萬美元的獎金。這筆錢的一半以上給一個團隊。Pwn2Own是由趨勢科技的零日計劃(ZDI)在溫哥華CanSecWest安全會議期間舉辦的年度

2023-12-03

次上線 600 餘部熱門經典影視作品的無障礙版本,為廣大視障人士提供免費觀影服務,豐富他們的精神文化生活。影視作品通常依賴豐富的視覺呈現來推進劇情、交代人物,但視障觀眾很難通過影片的視覺表達來輔助理解故事脈

2022-09-05

辦一項藝術比賽。這個比賽分為15個賽道,本次AI作畫獲一等獎的類別是“數字藝術/數字修飾照片”。提交這一畫作的Jason Allen表示,他多次調整輸入的提示詞,用Midjourney生成一百多幅畫作,經過數周的修改和挑選,才選出三幅

2023-01-10

小的紅包。據悉,今年在線下支付得福卡、AR掃福,以及為視障人群定制的“搖一搖”等經典玩法基礎上,新增多種集福卡方式。1、超3萬商傢小程序可領福卡:2023年五福繼續深入開放,商傢成為發福卡的主角,參與商傢規模是

2024-07-14

電影《抓娃娃》點映,有些影院有一副專門的耳機,這是為視障觀眾準備的。電影放映時,耳機同期播放著解說。解說在電影留白處(無臺詞、無聲音)解說環境、肢體、表情等,才能讓他們看”懂電影。無論從購票到觀影,視障

2024-07-04

播線上課,影響700多人。最近,他在全國殘疾人職業規劃大賽中獲得金獎,並計劃開展助殘公益項目,包括心理學講座、生活技能和職業培訓。葉泓霆用耳朵感知世界,用聲音溫暖他人,希望成為更多人生命中的光。他感激南京

2022-08-22

一位視障人士想要成為科學傢,需要付出多少努力?作為視障人士,僅僅是閱讀期刊文章,對化學傢MatthewGuberman-Pfeffer來說都意味著要克服一系列困難:首先,他得下載PDF轉換成文本,再用閱讀器把文中句子大聲朗讀出來。閱讀

2022-09-08

奇遇Dream Pro VR一體機、采用中國移動終端切片解決方案的小米智能手機以及5G傢庭小基站(基於高通FSM100 5G RAN平臺)完成。利用當紅齊天提供的沉浸式互動內容,端到端地驗證5G技術的橫向擴展能力,可以支持分離渲染無界XR等