據(jù)最新媒體報(bào)道，康奈爾大學(xué)和威斯康星大學(xué)麥迪遜分校的工程師們已經(jīng)開(kāi)發(fā)出一種新的可穿戴交互系統(tǒng)，利用熱傳感器準(zhǔn)確預(yù)測(cè)手部位置，在VR、機(jī)器人和翻譯手語(yǔ)方面有潛在應(yīng)用。

如何捕捉人類(lèi)手部動(dòng)作的復(fù)雜性以及手部傳感器的研究在AR / VR技術(shù)領(lǐng)域一直是一項(xiàng)艱巨的任務(wù)。

近期，相關(guān)研究人員演示了解決AR/VR手部動(dòng)作交互新方案--腕帶傳感器FingerTrak.FingerTrak基本上是一個(gè)手鐲，上面裝飾著四個(gè)小型熱敏攝像頭，每個(gè)攝像頭大約有豌豆大小。攝像頭從各自的位置拍攝佩戴者手腕的輪廓圖像。這足以讓一個(gè)專(zhuān)門(mén)設(shè)計(jì)的算法精確重建整個(gè)手部，包括每個(gè)手指的位置。

FingerTrak 系統(tǒng)使用機(jī)器學(xué)習(xí)，根據(jù)手腕輪廓，預(yù)測(cè) 20 個(gè)手指關(guān)節(jié)的位置。然后，這些手的姿勢(shì)可以在虛擬模型，甚至是機(jī)器人的手上重現(xiàn)。在測(cè)試中，該設(shè)備能夠準(zhǔn)確重現(xiàn)翻書(shū) 、用筆寫(xiě)字、喝水、使用手機(jī)等動(dòng)作。

目前不乏有一些設(shè)備使用各種技術(shù)嘗試追蹤手部動(dòng)作，有的使用深度感應(yīng)攝像頭或紅外傳感器觀察手指，有的使用動(dòng)作感應(yīng)手套，還有的在指尖上使用電磁傳感器。但幾乎所有的都有點(diǎn)過(guò)于笨重，不適合實(shí)際使用。FingerTrak 的設(shè)計(jì)更加輕巧，雖然它仍然不是看起來(lái)最舒適的科技產(chǎn)品，但它確實(shí)走在正確的未來(lái)軌道上。

盡管目前FingerTrak的技術(shù)研究還有待開(kāi)發(fā)，但其未來(lái)潛力巨大，可實(shí)現(xiàn)包括人機(jī)交互與控制、手語(yǔ)翻譯和健康監(jiān)控的潛在應(yīng)用，甚至包括發(fā)現(xiàn)早期的帕金森氏癥和阿爾茨海默氏癥等退化性疾病。

康奈爾大學(xué)和威斯康星大學(xué)麥迪遜分校的相關(guān)研究團(tuán)隊(duì)表示，在未來(lái)的技術(shù)完善后，F(xiàn)ingerTrak系統(tǒng)可以讓虛擬現(xiàn)實(shí)玩家在游戲中追蹤自己的手部動(dòng)作，可以讓遙控機(jī)器人直接模仿人類(lèi)操作員的動(dòng)作，可以幫助將手語(yǔ)翻譯成文字或語(yǔ)音，甚至可以幫助監(jiān)測(cè)影響運(yùn)動(dòng)技能的健康問(wèn)題。

FingerTrakFingerTrak的原型機(jī)非常小，隨著進(jìn)一步的工程設(shè)計(jì)，未來(lái)它可以進(jìn)一步縮小。FingerTrak主要依靠低分辨率(32×24像素)、比最薄的蘋(píng)果手表還要薄的熱敏攝像頭，在測(cè)試期間實(shí)現(xiàn)了在6.46到8.06度之間的平均角度誤差率。

目前尚不清楚FingerTrak系統(tǒng)是否能夠快速追蹤特定的手勢(shì)，比如一個(gè)人正在寫(xiě)什么。換句話說(shuō)，F(xiàn)ingerTrak可能會(huì)成為最好的補(bǔ)充性技術(shù)，而不是完全取代更高精度的手指追蹤解決方案，至少對(duì)目前的一些應(yīng)用而言如此。