top of page

AI 耳機閱讀臉部肌肉輪廓掌握表情變化識準確率高達 88%

過往耳機的作用都用作於傳達音訊之上,耳機之間都以音色、外觀、價錢比較。但近日美國康乃爾大學就有團隊發明以耳機閱讀人臉表情以表達情緒!這款耳機名為 C-Face 耳機,可以透過AI程式,辨識人臉「喜怒哀樂」。


「臉部辨識」AI 耳機

提到臉部辨識,大家日常使用手機開鎖、社交平台、拍照程式等等可能再熟悉不過,日常生活都有所接觸。言而AI 臉部辨識放在耳機之上,就為第一次。C-Face 可說是最方便且功能強大。它沒有複雜的感測器裝置,也不限於只能辨識部分表情。C-Face到底是怎樣做到?


C-Face 全稱 Contour-Face,是一款耳掛式可穿戴感測裝置,有耳塞式和頭掛式兩種。裝置均內建兩個微型 RGB 鏡頭,一種擷取紅色、綠色和光譜的數位相機。當我們臉部出現表情時,會引發臉部肌肉伸縮,從耳朵角度看去,會使臉頰外輪廓產生變化。C-Face 內建的微型相機正是負責記錄配戴者臉輪廓變化。即使戴上口罩,結果亦並沒有影響。


C-Face 能準確辨識臉部表情,是採用電腦視覺和深度學習模型。微型相機擷取影像後,視覺技術和深度學習模型會重建。重建過程,捲積神經網路進一步將臉部特徵轉換為 42 個關鍵點,包括配戴者的嘴巴、眼睛及眉毛位置和形狀。這些關鍵點將決定臉部情緒的種類。


C-Face 可將關鍵點辨識分成 8 種表情,如自然、生氣、親吻、大哭等,涵蓋愉快、中性及憤怒 3 種類別。另外 8 種表情也用來控制音樂裝置的播放選項,如「播放」、「下一首」或「音量增加」。其他用途還可能包括虛擬遊戲角色表達情感、幫助老師雲端授課時了解學生狀態等。目前,情緒辨識效果已過實際測試。9 位參與者提供的資料,C-Face 的表情辨識準確度超過 88%,無聲語音準確度近 85%。





Comments


bottom of page