Facebook最新VR專利解釋了『視場外控制器追蹤』解決方案

VR/AR

2020

12/01

19:57

映維網

評論

來源：映維網作者夢秋

控制器是XR的重要交互方式，同時是體驗沉浸式的關鍵一環(huán)。所以，如何精確地映射追蹤控制器成為了各家廠商積極研究的課題。

日前，美國專利商標局公布了一份Facebook于2019年5月提交的控制器追蹤技術專利申請，其介紹了一種包含視場追蹤器和非視場追蹤器的控制器追蹤系統(tǒng)。

對于Quest等采用內向外追蹤的VR一體機而言，控制器追蹤是一個巨大的挑戰(zhàn)，因為攝像頭是嵌入至頭顯而非擺在外部，所以紅外LED的檢測和追蹤變得相當困難。再加上控制器追蹤圓環(huán)容易被遮擋或離開頭顯攝像頭視場，所以問題正在成倍地增加。

名為“Multi-Layered Artificial Reality Controller Pose Tracking Architecture Having Prioritized Motion Models（具有優(yōu)先運動模型的多層人造現(xiàn)實控制器姿態(tài)追蹤架構）”的Facebook專利申請主要介紹了一種包括視場追蹤器和非視場追蹤器的控制器追蹤系統(tǒng)。

具體來說，當可在傳感器/攝像頭的視場內追蹤控制器時，系統(tǒng)可以根據傳感器/攝像頭提供的圖像數據來確定其姿態(tài)，亦即以視場追蹤器的方式來追蹤控制器。

當不可在傳感器/攝像頭視場內追蹤控制器時（如控制器離開攝像頭視場），或者如果控制器被視場的另一個對象遮擋時，系統(tǒng)可以利用其他數據和運動模型來確定控制器的姿態(tài)。

例如，控制器追蹤子系統(tǒng)可以具有兩個組件，一個視場追蹤組件（Constellation追蹤組件）和一個非視場追蹤組件（“Corner-Case”追蹤組件）。

特別是，在典型操作條件下，視場追蹤器接收用于頭顯的狀態(tài)數據和控制器的控制器狀態(tài)數據（速度、加速度等），以計算控制器的估計姿態(tài)。如果控制器可追蹤（如在視場范圍內且未被遮擋），則使用視場追蹤器計算的姿態(tài)，并繞過非視場追蹤器。如果控制器在視場內不可追蹤，并且控制器狀態(tài)數據滿足一個或多個角點追蹤情況的激活條件，則非視場追蹤器應用一個或多個專門的運動模型來計算控制器的控制器姿態(tài)。

Corner-Case是指不易追蹤控制器的情況，這包括：控制器的位置不可靠以及控制器處于靜止狀態(tài)，控制器離開傳感器/攝像頭視場；控制器被遮擋等等。每個Corner-Case可以具有確定是否評估與激活條件相關聯(lián)的運動模型的激活和停用條件。在顯示幀生成周期中，可以激活多個Corner-Case的行為。通過評估與最高優(yōu)先級行為相關的激活模型而得到的控制器狀態(tài)數據，其可用于確定控制器的姿態(tài)。

然后，所得到的控制器姿態(tài)可用于通過人造現(xiàn)實系統(tǒng)提供更精確的內容渲染。