產(chǎn)品推薦:氣相|液相|光譜|質(zhì)譜|電化學|元素分析|水分測定儀|樣品前處理|試驗機|培養(yǎng)箱


化工儀器網(wǎng)>技術中心>工作原理>正文

歡迎聯(lián)系我

有什么可以幫您? 在線咨詢

駕駛員情緒識別及表情分析

來源:天津百勝客科技有限公司   2023年06月02日 11:18  

背景

駕駛員情緒在駕駛中起著重要作用,因為它會影響駕駛安全性和舒適性。在每年發(fā)生的20-50百萬例非致命傷害和124萬例致命道路交通事故中,駕駛員無力控制情緒已被視為安全的關鍵因素之一。智能汽車的快速發(fā)展也要求在駕駛員與自動化交互與協(xié)作的集成方面出現(xiàn)新的需求,從而進一步提升駕駛舒適性,其中駕駛員情緒是關鍵狀態(tài)之一。因此識別駕駛員情緒對于提升來智能汽車的安全性和舒適性至關重要。

面部表情對駕駛員來說是表達情感的有力渠道。基于面部表情的情緒識別的新進展促使人們創(chuàng)建了多個面部表情數(shù)據(jù)集。公開可用的數(shù)據(jù)集是加速面部表情研究的基礎,如表1所示,我們總結了到目前為止所有包含面部表情的數(shù)據(jù)集,這些數(shù)據(jù)集已被用于面部表情來情緒識別,并獲得了不同程度的成功。這些數(shù)據(jù)集的共同特征之一是在靜態(tài)等場景下采集參加者的面部表情數(shù)據(jù)。

盡管靜態(tài)場景下采集到的面部表情數(shù)據(jù)可以研究通過面部表情識別情緒狀態(tài),但是它將所提出的算法的應用局限到了靜態(tài)生活場景下。結果,如果將此類算法應用到動態(tài)的駕駛場景下,可能無法得到可靠的識別效果。相對地,駕駛汽車是是一個復雜的認知過程,需要駕駛員動態(tài)地對視覺提示,危害評估,決策,戰(zhàn)略規(guī)劃等同時做出反應,從而占用駕駛員大量的認知資源,而認知過程對引起情緒反應來說是必須的,顯然,駕駛會影響駕駛員的情緒表達,這種情緒表達和生活場景中相比是有差異的。

表1. 基于面部表情的情緒識別公開數(shù)據(jù)集小結

image.png

DEFE數(shù)據(jù)集

為了解決現(xiàn)有駕駛員情緒分析數(shù)據(jù)集的局限性,我們建立了一個駕駛員情緒面部表情數(shù)據(jù)集(DEFE),以研究基于面部視覺數(shù)據(jù)的駕駛員情緒識別。在表2中,我們描述了收集駕駛員真實面部表達的實驗細節(jié),以及數(shù)據(jù)集中的情感標簽。DEFE數(shù)據(jù)集共有60位參加者(43位男性),每位參加者在觀看完經(jīng)選擇的刺激材料后,在相同的駕駛場景下完成駕駛任務,并分別從維度情緒和離散情緒兩方面評價了他們在這一駕駛過程中的情緒反應,這些度量包括喚醒,效價和掌控力以及情感類別和強度,實驗數(shù)據(jù)采集及駕駛場景如圖1所示。

image.png

表2. DEFE數(shù)據(jù)集小結

image.png

image.png

圖1. DEFE實驗數(shù)據(jù)集實驗采集及駕駛場景

我們還比較了使用DEFE數(shù)據(jù)集進行駕駛員情緒識別的結果。DEFE數(shù)據(jù)集可以分別從維度情緒(喚醒,效價和掌控力)和離散情緒(情感類別和強度)兩方面對駕駛員情緒進行識別,以準確度和F1分數(shù)建立了數(shù)據(jù)集的基線結果。除了DEFE數(shù)據(jù)集的情緒識別外,我們還選擇了DEAPCK+數(shù)據(jù)集作為靜態(tài)生活場景下的比較數(shù)據(jù)集,比較結果如表3所示(DEAP數(shù)據(jù)集因為采集過程中面部存在隨機電極片遮擋,可能是造成識別結果較低的主要原因)。

image.png

表3.DEFE數(shù)據(jù)集情緒識別結果

2顯示了DEFE數(shù)據(jù)集的樣例圖片。我們觀察到面部表達隨情感的種類而變化,但是在駕駛中這種變化是特別微弱的。例如,消極情緒(憤怒)和中性狀態(tài)的差異非常小。在大多數(shù)視頻剪輯中我們很難觀察到峰值表情,這種現(xiàn)象很可能是因為情緒的面部表達受到了駕駛任務的影響。

image.png

圖2. DEFE數(shù)據(jù)集中3種情緒類別的樣例圖像:一行憤怒,第二行快樂和第三行中性。

動態(tài)駕駛場景和靜態(tài)生活場景下面部表情的差異

進一步的,我們基于DEFEJAFFE數(shù)據(jù)集對動態(tài)駕駛和靜態(tài)生活條件之間的面部表情進行了差異分析。圖3顯示了在面部動作編碼系統(tǒng)(FACS)中憤怒和開心的動作單元(AU)編碼以及描述。通過比較兩個數(shù)據(jù)集中不同情緒的動作單元出現(xiàn)(AU presence),如表4所示,我們發(fā)現(xiàn)兩種場景下AU presence存在顯著差異。

image.png

圖3. FACS可用于描述成人的面部表情。(a)和(b)分別顯示常見的FACS憤怒和快樂編碼,(c)呈現(xiàn)AU的憤怒和快樂的內(nèi)容描述

image.png

表4.動態(tài)駕駛和靜態(tài)生活場景下的AU presence差異分析

對于邏輯回歸結果,動態(tài)駕駛和靜態(tài)生活場景下也有顯著性差異。對于憤怒情緒,動態(tài)駕駛場景下的邏輯回歸結果顯示只有AU4和憤怒情緒相關且顯著,而在靜態(tài)生活場景下AU4AU5AU23都和憤怒情緒相顯著相關。對于開心情緒,動態(tài)駕駛場景下的回歸結果顯示沒有任何AU和開心顯著相關,但是在靜態(tài)生活場景下的結果顯示AU12和開心情緒顯著相關。

image.png

表5.動態(tài)駕駛和靜態(tài)生活場景下的AU presence回歸分析

以上結果表明駕駛場景中的人類面部情感表達與其他生活場景不同。這可能是由于駕駛員需要在駕駛過程中保持專注,這降低了面部肌肉運動的頻率和幅度。關于這些結果的解釋性研究可能需要進一步探索。

來源:jianshu




免責聲明

  • 凡本網(wǎng)注明“來源:化工儀器網(wǎng)”的所有作品,均為浙江興旺寶明通網(wǎng)絡有限公司-化工儀器網(wǎng)合法擁有版權或有權使用的作品,未經(jīng)本網(wǎng)授權不得轉載、摘編或利用其它方式使用上述作品。已經(jīng)本網(wǎng)授權使用作品的,應在授權范圍內(nèi)使用,并注明“來源:化工儀器網(wǎng)”。違反上述聲明者,本網(wǎng)將追究其相關法律責任。
  • 本網(wǎng)轉載并注明自其他來源(非化工儀器網(wǎng))的作品,目的在于傳遞更多信息,并不代表本網(wǎng)贊同其觀點和對其真實性負責,不承擔此類作品侵權行為的直接責任及連帶責任。其他媒體、網(wǎng)站或個人從本網(wǎng)轉載時,必須保留本網(wǎng)注明的作品第一來源,并自負版權等法律責任。
  • 如涉及作品內(nèi)容、版權等問題,請在作品發(fā)表之日起一周內(nèi)與本網(wǎng)聯(lián)系,否則視為放棄相關權利。
企業(yè)未開通此功能
詳詢客服 : 0571-87858618