(ChinaZ.com) 10月13日 消息:康奈爾大學(xué)的研究人員發(fā)明了一種耳機(jī)系統(tǒng)——C-Face,即使戴著口罩也可以追蹤佩戴者的面部表情。
據(jù)介紹,C-Face可以監(jiān)測(cè)耳機(jī)佩戴者的臉頰輪廓,并將佩戴者的表情轉(zhuǎn)換成表情符號(hào)。例如,這可以讓人們?cè)谌航M通話無(wú)需打開(kāi)網(wǎng)絡(luò)攝像頭就能表達(dá)自己的情緒。
康奈爾大學(xué)科學(xué)實(shí)驗(yàn)室主任Cheng Zhang在一份聲明中說(shuō):“與現(xiàn)有的任何一種追蹤面部表情的耳戴式可穿戴技術(shù)相比,這種設(shè)備更簡(jiǎn)單,不那么顯眼,功能也更強(qiáng)大。”“在之前識(shí)別面部表情的可穿戴技術(shù)中,大多數(shù)解決方案都需要在臉上安裝傳感器,并且只能識(shí)別有限的面部表情。”
C-Face耳機(jī)使用兩個(gè)RGB攝像頭,位于每只耳朵的下方。它們可以記錄佩戴者面部肌肉運(yùn)動(dòng)時(shí)臉頰輪廓的變化。
一旦使用計(jì)算機(jī)視覺(jué)和深度學(xué)習(xí)模型重建圖像,卷積神經(jīng)網(wǎng)絡(luò)就會(huì)分析2D圖像。該技術(shù)可以將這些信息轉(zhuǎn)換為 42 個(gè)面部特征點(diǎn),代表佩戴者的嘴巴、眼睛和眉毛的位置和形狀。
C-Face可以將這些表情轉(zhuǎn)換成 8 個(gè)表情,包括中性表情和憤怒表情。該系統(tǒng)還可以通過(guò)面部提示來(lái)控制音樂(lè)應(yīng)用程序的播放選項(xiàng)。
其他可能的用途還包括,在游戲中使用化身來(lái)表達(dá)人的真實(shí)情感。教師也可以追蹤學(xué)生在遠(yuǎn)程課堂上的參與度。
研究人員只能對(duì) 9 名參與者對(duì)C-Face系統(tǒng)測(cè)試。盡管如此,表情符號(hào)的識(shí)別準(zhǔn)確率還是超過(guò)了88%,面部表情的識(shí)別準(zhǔn)確率也超過(guò)了85%。
一旦這項(xiàng)技術(shù)投入到實(shí)際應(yīng)用,那么帶著口罩也可以很高的進(jìn)項(xiàng)表情交流了。