Facebook現(xiàn)實(shí)實(shí)驗室Reality Labs(FRL)致力于許多項目，意在讓與科技與人的互動變得更加平易近人，F(xiàn)RL此前研究的技術(shù)包括VR頭盔和AR眼鏡。手部追蹤技術(shù)對虛擬現(xiàn)實(shí)尤為重要，它能讓技術(shù)更有沉浸感，力求以最 "隨心所欲"的方式與人類互動。
一開始，F(xiàn)RL的工作旨在打造更自然的設(shè)備，例如Touch控制器，這些控制器被設(shè)計成舒適手持的形狀，內(nèi)部有很多傳感器，而觸摸控制器提供了栩栩如生的手部存在感，讓基本的VR交互感覺更像真實(shí)的物件。
另一方面，F(xiàn)RL正在努力消除對手部控制器的需求，轉(zhuǎn)而感應(yīng)人類的裸手。該實(shí)驗室在五年多前就開始研究VR的手部追蹤，之前從來沒有人能研發(fā)消費(fèi)質(zhì)量的、無控制器的手部追蹤功能。這意味著這項技術(shù)必須從頭開始創(chuàng)建。
FRL目前正在探索新的實(shí)驗性文本輸入形式，這是一項常見的、對生產(chǎn)力至關(guān)重要的任務(wù)。FRL提出了一種新的方法，利用基于標(biāo)記的手部跟蹤系統(tǒng)的手部運(yùn)動，在沒有鍵盤的任何平面上實(shí)現(xiàn)觸摸打字。該系統(tǒng)將運(yùn)動直接輸入并解碼為用戶打算輸入的文本。
研究人員指出，該技術(shù)仍處于早期研究階段，但說明了手部追蹤在活動場景中的潛力。研究人員必須理解不穩(wěn)定的打字模式，并采用自動語音識別中的統(tǒng)計解碼技術(shù)，利用運(yùn)動模型從手部運(yùn)動中預(yù)測按鍵。使用該方法，打字員僅僅使用他們的手，一個平面，沒有其他東西的狀態(tài)下平均每分鐘打出73個字，未糾正錯誤率為2.4%。與使用實(shí)際鍵盤時相比，打字員使用新系統(tǒng)達(dá)到了類似的速度和準(zhǔn)確性。
