Meta研究人員提出QuestSim方案 可為VR化身配上合理的腿部姿態


現階段的虛擬現實(VR)頭戴式裝置和手持式控制器,隻能對頭部和手部動作進行追蹤。即使用上所謂的逆運動學(IK)算法,也隻能相對良好地預估肘部和軀幹動作、而很少對腿部進行校正。正因如此,許多VR解決方案幹脆隻顯示虛擬化身的上半身。

0.jpg

視頻截圖(via VR Trailers & Clips)

即使 SteamVR 和 HTC Vive 提供額外的追蹤解決方案,但身體追蹤所需的三套裝置的成本也需要 350 美元以上。

好消息是,在一篇討論 QuestSim 的新論文中(PDF),Meta 研究人員展示一套由神經網絡驅動的系統。

其特點是能夠借助來自 Quest 2 頭顯 + 控制器的追蹤數據、更合理地預估佩戴者的全身姿態,而無需額外的追蹤器 / 外部傳感器。

Meta Research Quest 2 Body Tracking Without Extra Trackers(via)

生成的 VR 化身動畫,與用戶的真實動作相當接近。Meta 研究人員甚至聲稱,由此產生的準確性和抖動、優於穿戴式的 IMU 跟蹤器。

比如 Pico 4 宣佈的 Pico Fitness Band,就是僅配備加速度計和陀螺儀的裝置 —— 盡管該公司也聲稱正在研發自己的機器學習方法。

不過這裡有一個問題 —— 如視頻所示,該系統會渲染出一副合理的全身姿勢,但它不一定精確還原用戶的實際姿態。

1.jpg

正因如此,QuestSim 僅適用於參考其他人的 VR 化身、而不是拿來時刻俯視自己的身姿,此外系統的延遲多達 160 ms(72 Hz 下超過 11 幀)。

即便如此,能夠在 VR 交互中看到其他人的全身像,怎麼也比現階段的半截人像要好得多。剩下的問題是 —— 這套(或類似的)系統,是否、以及何時會放到 Quest 2 上?

2.jpg

Meta 首席技術官 Andrew Bosworth 似乎在上周的 Ask Me Anythinig 互動問答活動期間暗示這一點,當被問及 Instagram 中的腿部追蹤時,他答道:

我們確實經常因為無腿化身而被大傢給調侃,但我認為大傢的吐槽是相當公正和有趣的。

畢竟給個人的虛擬化身配上與現實不匹配的腿,可能會讓用戶感到非常不安。

但若將腿安到其他人的虛擬化身上,就沒有這方面的困擾。

感興趣的朋友,可留意於兩周後舉辦的 Meta Connect 年度 AR / VR 活動期間的詳細公告。


相關推薦

2022-08-29

因此,更寬的視線范圍需要更好的透鏡技術支持。並且,研究人員還要確保鏡頭和顯示器的構建方式不會增加VR頭顯的外形尺寸。3、人體工程學(Ergonomics):VR頭顯佩戴舒適度不夠目前大多數VR頭顯都會略顯“笨重”,例如Quest 2

2022-10-15

Quest Pro 和不少其它競品,都還在使用相對保守的 LCD 顯示方案。另外與 LCD 和其它替代方案相比,Micro-OLED 的能效表現也更加出眾。言歸正傳,蘋果頭顯設計將遮擋周邊光線、並借助眼動追蹤來調整邊緣顯示質量,以減少設備的

2023-03-30

療行業同樣蘊含著巨大潛力。他還強調,該公司致力於讓研究人員、民間組織和其他公司參與元宇宙的開發,以創造“真正的創造力、真正的獨創性和真正的快樂,讓大傢都能享受快樂發展”的體驗。在周三的虛擬房間裡,當一

2022-08-20

—即使是在頭顯上,”他說。The Verge 的編輯對他的說法提出自己的觀點,他認為從他個人而言,如果自己的公司已經將數十億美元投入到一個數字世界的建設中,應該避免發佈簡陋的截圖——尤其是在其剛剛宣佈對 Quest 2 漲價 1

2022-10-12

帶到更多的體驗中。"在腿的基礎上,Meta元宇宙化身還將顯示更廣泛的面部表情和反應,以更好地表達人們的感受。人們還將能夠為他們的化身選擇更多的身體類型和膚色,以更好地代表他們是誰。Meta還宣佈一項新功

2024-04-23

Meta介紹,華碩旗下的玩傢國度(ROG)將利用其作為遊戲解決方案領導者的專業知識開發一款全新的遊戲頭顯。聯想則將利用其共同設計VR一體機Oculus Rift S的經驗,以及在設計ThinkPad筆記本電腦系列等領先設備方面的深厚專業知識,

2022-08-30

設計出的機器人的靈敏度和多功能性,還對隊伍的熟練度提出很高的要求。這些都暗示比賽項目一旦能夠實現,將對現實具有的重要意義,而當我們再從一些參賽隊伍的作品細節觀察,又能進一步看到這項比賽的特殊之處。從現

2022-10-13

格一出場便引發不少關註。人們註意到,跟其他人的虛擬化身不同,他的虛擬化身居然擁有“下半身”。別以為人們大驚小怪,在這款應用以及大多數VR社交應用上,人們基本上很少能夠擁有兩條腿,在去年的Connect大會演示中,

2022-10-11

krooms應用中召開會議。借助這款應用,人們可以通過虛擬化身的方式在各種虛擬辦公空間中召開會議。Meta的前身是Facebook,去年正式更名。該公司在2021年推出Horizon Workrooms。必須擁有Meta Quest 2虛擬現實頭顯才能使用Horizon Workrooms

2022-10-14

,從硬件配置來看,Meta Quest Pro可能真就不賺錢。在顯示方案上,Meta Quest Pro采用時下流行的Pancake 方案,它能使機器的光學堆棧較上代產品縮小40%,進而使機器的體積變小。但價格相對昂貴,目前市場均價在150美元左右,相較於

2022-10-16

作的公司。Meta CEO馬克·紮克伯格還宣佈,Horizon Worlds中的化身將有腿並在演講中展示其可能的樣子。目前還不清楚當他們到達地平線世界時是否真的會是這個樣子,因為Meta的一位發言人告訴UploadVR的編輯Ian Hamilton,這隻是對未來

2022-08-27

rk Zuckerberg)在Facebook上發佈屏幕截圖,批評者群嘲其數字化身的圖形質量太差。紮克伯格幾天後發佈第二張照片,顯示更復雜的圖像。他承認之前的圖片“非常簡單”,並承諾“很快就會對Horizon和數字化身進行重大更新”。Meta

2022-10-18

ta就惹一身腥。在宣佈改名之初,就有不下三傢公司對Meta提出指控,稱其盜用自己的商標。直到2021年底,Meta才以收購美國地方銀行Meta金融集團(Meta Financial Group)名稱全球使用權的方式,解決此事,花6000萬美元(約合3.8億元人

2022-07-15

例子。與上一代 MR 頭顯(Quest、Vive 等)中使用的菲涅爾方案相比,Pancake 方案成像質量更好,也更加輕薄,但此前工藝並不成熟,無法大規模運用。過去幾年隨著技術發展,Pancake 方案商用化成為可能,但目前的成本依然不低,