(ChinaZ.com) 10月13日 消息:康奈爾大學的研究人員發明了一種耳機系統——C-Face,即使戴著口罩也可以追蹤佩戴者的面部表情。
據介紹,C-Face可以監測耳機佩戴者的臉頰輪廓,并將佩戴者的表情轉換成表情符號。例如,這可以讓人們在群組通話無需打開網絡攝像頭就能表達自己的情緒。
康奈爾大學科學實驗室主任Cheng Zhang在一份聲明中說:“與現有的任何一種追蹤面部表情的耳戴式可穿戴技術相比,這種設備更簡單,不那么顯眼,功能也更強大。”“在之前識別面部表情的可穿戴技術中,大多數解決方案都需要在臉上安裝傳感器,并且只能識別有限的面部表情。”
C-Face耳機使用兩個RGB攝像頭,位于每只耳朵的下方。它們可以記錄佩戴者面部肌肉運動時臉頰輪廓的變化。
一旦使用計算機視覺和深度學習模型重建圖像,卷積神經網絡就會分析2D圖像。該技術可以將這些信息轉換為 42 個面部特征點,代表佩戴者的嘴巴、眼睛和眉毛的位置和形狀。
C-Face可以將這些表情轉換成 8 個表情,包括中性表情和憤怒表情。該系統還可以通過面部提示來控制音樂應用程序的播放選項。
其他可能的用途還包括,在游戲中使用化身來表達人的真實情感。教師也可以追蹤學生在遠程課堂上的參與度。
研究人員只能對 9 名參與者對C-Face系統測試。盡管如此,表情符號的識別準確率還是超過了88%,面部表情的識別準確率也超過了85%。
一旦這項技術投入到實際應用,那么帶著口罩也可以很高的進項表情交流了。