本文為該系列的下篇,上篇(關於「Facebook Reality Labs 再添新產品 AR、VR 一把抓」)請點此連結
FB為何使用手腕、而不是語音來做 AR 感測?
各種 VR 穿戴式裝備如火如荼的發展中,Facebook 為什麼選擇「手腕」這個比較不受注意的地方呢?
在探索輸入的每一種可能性時,研究團隊注意到了「觸覺感知」的可能性:「人們從出生時的第一次抓握,直到靈巧地操作物體和在鍵盤上打字,手和手指都會有非常強烈的感覺。」
Facebook Reality Labs 研究科學總監 Sean Keller 表示。
「我們利用觸覺訊號來了解世界,觸覺使我們能夠使用工具,並進行細微精緻的控制。從使用手術刀的外科醫生,到讓雙手飛舞於琴鍵上的鋼琴演奏家,都來自於觸覺感知。」
如 AR 感測器中有一項模擬弓箭的動作,就是利用腕部的觸覺,使佩戴者有近似拉開弓的真實感,從而擁有虛擬卻又十分真實的體驗。
研究人員還表示;「觸覺還能夠傳達不同的情感,這可能是改善社交溝通的一種新的方式。」如:當使用者收到緊急郵件時,感測器會發出比收到普通郵件更顯著的震動;當有來電時,感測器可以通過呈現不同的觸感,讓使用者不用看就能辨識出是誰打電話來。
與較常見的語音控制相比,穿戴式設備更適合在公共場所使用。此外,手錶般的設計也適合整天舒適地佩戴,不需要另外費心攜帶,更無需再通過手機即可控制操錯,使用上更加方便靈活。
目前團隊已開發兩種原型機,來幫助研究團隊進一步瞭解腕式裝置的觸覺回饋機制。
其中一個原型機主要利用「波紋帶」(Bellowband)技術,在柔軟輕巧的腕帶上安裝 8 個類似「充氣風箱」的氣動波紋管,波紋管內的空氣可以膨脹或放氣,藉由壓力差呈現出有趣的振動觸覺回饋。
另一款原型機名為 Tasbi(Tactile and Squeeze Bracelet Interface,觸覺與擠壓手環介面),由 6 個振動觸覺執行器和 1 個手腕擠壓裝置所構成。研究室運用此兩種原型機與不同的虛擬模式互動,測試要為虛擬按鈕設置何種硬度,或移動虛擬物件時要反饋怎麼樣的觸感。
手腕感測背後的技術
這些功能,都是透過肌電圖 (Electromyography,簡稱EMG) 的相關研究實現的。肌電圖是偵測及記錄肌肉產生的肌肉動作電位的技術,可以偵測肌肉在靜止狀態、輕度收縮及強力收縮等整個運動神經系統的活動訊號。
研究團隊表示,透過手腕發出的運動神經訊號是非常清晰的,即使是幾毫米差距的「彈指之間」,EMG 偵測出從脊髓通過手腕流向手部的運動神經電訊號,再依靠後續技術轉化為數位指令,讓使用者能控制裝置的各種功能。
不過,Facebook 官方也表示此功能仍然存在許多技術挑戰,包括機器學習應用,人機互動技術,使用者介面設計等等考驗。
該 VR 手腕感測器預計要與 Facebook 同樣正在開發的 AR 眼鏡配合使用,然而官方未有透露上市時間。或許,等有朝一日這兩項產品普及後,我們的生活將發生天翻地覆的變化。
相關文章:
人工智慧「聽咳嗽聲」就能驗出新冠「無症狀」患者!成功率 98.5%
【人工智慧預防糖尿病患失明】台大打造人工智慧醫療,診斷視網膜病變準確度達95%