Facebook現(xiàn)實(shí)實(shí)驗(yàn)室Reality Labs(FRL)致力于許多項(xiàng)目,意在讓與科技與人的互動(dòng)變得更加平易近人,F(xiàn)RL此前研究的技術(shù)包括VR頭盔和AR眼鏡。手部追蹤技術(shù)對(duì)虛擬現(xiàn)實(shí)尤為重要,它能讓技術(shù)更有沉浸感,力求以最 "隨心所欲"的方式與人類互動(dòng)。
一開始,F(xiàn)RL的工作旨在打造更自然的設(shè)備,例如Touch控制器,這些控制器被設(shè)計(jì)成舒適手持的形狀,內(nèi)部有很多傳感器,而觸摸控制器提供了栩栩如生的手部存在感,讓基本的VR交互感覺更像真實(shí)的物件。
另一方面,F(xiàn)RL正在努力消除對(duì)手部控制器的需求,轉(zhuǎn)而感應(yīng)人類的裸手。該實(shí)驗(yàn)室在五年多前就開始研究VR的手部追蹤,之前從來沒有人能研發(fā)消費(fèi)質(zhì)量的、無控制器的手部追蹤功能。這意味著這項(xiàng)技術(shù)必須從頭開始創(chuàng)建。
FRL目前正在探索新的實(shí)驗(yàn)性文本輸入形式,這是一項(xiàng)常見的、對(duì)生產(chǎn)力至關(guān)重要的任務(wù)。FRL提出了一種新的方法,利用基于標(biāo)記的手部跟蹤系統(tǒng)的手部運(yùn)動(dòng),在沒有鍵盤的任何平面上實(shí)現(xiàn)觸摸打字。該系統(tǒng)將運(yùn)動(dòng)直接輸入并解碼為用戶打算輸入的文本。
研究人員指出,該技術(shù)仍處于早期研究階段,但說明了手部追蹤在活動(dòng)場景中的潛力。研究人員必須理解不穩(wěn)定的打字模式,并采用自動(dòng)語音識(shí)別中的統(tǒng)計(jì)解碼技術(shù),利用運(yùn)動(dòng)模型從手部運(yùn)動(dòng)中預(yù)測按鍵。使用該方法,打字員僅僅使用他們的手,一個(gè)平面,沒有其他東西的狀態(tài)下平均每分鐘打出73個(gè)字,未糾正錯(cuò)誤率為2.4%。與使用實(shí)際鍵盤時(shí)相比,打字員使用新系統(tǒng)達(dá)到了類似的速度和準(zhǔn)確性。