長(zhǎng)期以來(lái)，由于情緒和感覺(jué)的抽象性和模糊性，理解并準(zhǔn)確提取情感信息一直是個(gè)挑戰(zhàn)。為解決這一問(wèn)題，研究團(tuán)隊(duì)開(kāi)發(fā)了一種多模態(tài)人類(lèi)情感識(shí)別系統(tǒng)。該系統(tǒng)結(jié)合了語(yǔ)言和非語(yǔ)言表達(dá)數(shù)據(jù)，以有效利用全面的情感信息。

 

　　該系統(tǒng)的核心是個(gè)性化皮膚集成面部界面（PSiFI）系統(tǒng)，具有首創(chuàng)的雙向摩擦應(yīng)變和振動(dòng)傳感器，可同時(shí)感應(yīng)并收集語(yǔ)言與非語(yǔ)言表達(dá)數(shù)據(jù)，再通過(guò)無(wú)線(xiàn)數(shù)據(jù)傳輸，實(shí)現(xiàn)實(shí)時(shí)情緒識(shí)別。

 

　　該技術(shù)基于“摩擦充電”現(xiàn)象，即物體在摩擦?xí)r分離成正電荷和負(fù)電荷，而且系統(tǒng)不需要外部電源或復(fù)雜的測(cè)量設(shè)備來(lái)識(shí)別數(shù)據(jù)。

 

　　研究團(tuán)隊(duì)成功整合了對(duì)面部肌肉變形和聲帶振動(dòng)的檢測(cè)，通過(guò)實(shí)驗(yàn)收集了面部肌肉變形和聲音等多模態(tài)數(shù)據(jù)。在最少的訓(xùn)練下，該系統(tǒng)表現(xiàn)出很高的準(zhǔn)確性。同時(shí)也確保了可穿戴性和便利性。該系統(tǒng)還能應(yīng)用于VR環(huán)境，可應(yīng)用于“數(shù)字禮賓”、智能家居、私人電影院和智能辦公室。

 

　　研究人員表示，這項(xiàng)成果顯示了在下一代可穿戴系統(tǒng)中使用情感的潛力，而情感正是人類(lèi)信息表達(dá)的最復(fù)雜形式之一。有了這個(gè)系統(tǒng)，只需幾個(gè)學(xué)習(xí)步驟就可實(shí)現(xiàn)實(shí)時(shí)情緒識(shí)別，而無(wú)需以往復(fù)雜的測(cè)量設(shè)備。這為未來(lái)的便攜式情感識(shí)別設(shè)備和下一代基于情感的數(shù)字平臺(tái)服務(wù)帶來(lái)了可能性。

 

【總編輯圈點(diǎn)】

 

　　如文中所說(shuō)，情感是人類(lèi)信息的復(fù)雜形式。如歌中所唱：“笑，就歌頌；一皺眉頭就心痛。”情緒可以通過(guò)面部表情和聲音來(lái)展現(xiàn)，于是這套能夠檢測(cè)面部肌肉變形和聲帶振動(dòng)的系統(tǒng)閃亮登場(chǎng)，化身“知己”，成為能體察我們心境變化的貼心“人”。人們的愉悅和煩悶都能被識(shí)別，系統(tǒng)可以根據(jù)人們的心境變化采取不同對(duì)策，給出符合人們喜好的選項(xiàng)，提供熨帖服務(wù)。不過(guò)，有時(shí)人類(lèi)也會(huì)偽裝心情，不知道這種系統(tǒng)能否識(shí)別“皮笑肉不笑”呢？