您的位置:首頁 >智能 >

                      每日快訊!Meta 最新研究:無需額外跟蹤器的 Quest 2 身體跟蹤

                      2022-10-01 18:40:27    來源:騰訊網

                      Meta 研究人員展示了無需額外跟蹤器的 Quest 2 身體跟蹤。


                      (資料圖)

                      當前的 VR 系統附帶頭顯和手持控制器,因此只能跟蹤頭部和手的位置。您的肘部、軀干和腿部的位置可以使用稱為逆運動學 (IK) 的一類算法來估計,但這有時僅對肘部準確,而很少對腿部進行校正。對于每組給定的頭部和手部位置,都有太多潛在的解決方案。

                      鑒于 IK 的局限性,今天的一些 VR 應用程序只顯示你的手,許多只顯示你的上半身。使用 SteamVR 跟蹤的 PC 頭戴設備支持佩戴額外的跟蹤器,例如HTC 的 Vive Tracker,但身體跟蹤所需的三個成本在 350 美元以上,因此大多數游戲不支持此功能。

                      但在一篇名為 QuestSim 的新論文中,Meta 研究人員展示了一個由神經網絡驅動的系統,該系統可以僅使用來自 Quest 2 及其控制器的跟蹤數據來估計合理的全身姿勢。不需要額外的跟蹤器或外部傳感器。

                      生成的化身動作與用戶的真實動作相當接近。研究人員甚至聲稱,由此產生的準確性和抖動優于磨損的 IMU 跟蹤器——只有加速度計和陀螺儀的設備,例如 Pico 4 宣布的Pico Fitness Band(雖然 Pico 聲稱它正在研究自己的機器學習算法)。

                      但是,這里有一個問題。正如視頻中所見,該系統旨在產生一個合理的全身姿勢,而不是與您的手的確切位置相匹配。因此,QuestSim 僅適用于查看其他人的化身身體,而不適合俯視時看到自己的身體。系統的延遲也是 160 毫秒——在 72Hz 時超過 11 幀。

                      Meta目前的無腿頭像

                      但是,看到其他人化身的全身運動比 Meta 當前化身經常被批評的無腿上身要好得多。那么這個系統或類似的系統會出現在 Quest 2 中嗎?

                      Meta CTO Andrew Bosworth 似乎在上周暗示了這一點。當被問及 Instagram 中的腿部追蹤“問我任何事情”時,博斯沃思回應道:

                      “是的,我們經常因為無腿的化身而被取笑,我認為這很公平,而且我認為這很有趣。

                      在你自己的頭像上擁有與你的真實腿不匹配的腿,這讓人們非常不安。但是我們當然可以把腿放在其他人身上,你可以看到,這根本不會打擾你。

                      因此,我們正在研究對旁觀者來說看起來很自然的腿——因為他們不知道你真正的腿實際上是如何定位的——但是當你看著自己的腿時,你可能會繼續什么都看不到。這是我們目前的策略?!?/p>

                      不過,短期解決方案可能與該算法的質量不同。機器學習研究論文傾向于在功能強大的 PC GPU 上以相對較低的幀速率運行。該論文沒有提及所描述系統的運行時性能。

                      Meta Connect 年度 AR/VR 活動僅在 2 周多的時間內舉行,因此任何身體追蹤公告都可能在此期間發布。

                      關鍵詞: Meta 最新研究無需額外跟蹤器的 Quest 身體跟蹤

                      相關閱讀

                      清冷受被cao到肚子鼓起来bl