產(chǎn)品簡介
ErgoLAB Emotion面部表情分析模塊，是一款專業(yè)的面部表情分析與狀態(tài)識別工具。系統(tǒng)結(jié)合機(jī)器學(xué)習(xí)算法與圖像識別技術(shù)，利用面部肌肉特征點(diǎn)計(jì)算和分類表情狀態(tài)，自動編碼多種基本表情、精確計(jì)算情感效價(jià)，系統(tǒng)可實(shí)時(shí)檢測被試的頭部位置、面部特征點(diǎn)、視線朝向、基本生物信息等，結(jié)合AI狀態(tài)識別進(jìn)一步實(shí)現(xiàn)對操作人員的分心、疲勞、應(yīng)激等狀態(tài)的自動識別以及特定環(huán)境條件下的預(yù)警反饋。
特點(diǎn)
實(shí)時(shí)自動編碼7種面部表情狀態(tài)，包括高興、悲傷、厭惡、恐懼、驚訝、生氣、參與度。
實(shí)時(shí)監(jiān)測頭部位置坐標(biāo)Head Position，包括翻滾角Roll、偏航角Yaw、俯仰角Pitch。
實(shí)時(shí)計(jì)算面部表情程度值，每種以0至bai fen zhi bai區(qū)間計(jì)算，以及整體面部肌肉的參與度狀態(tài)。
精確識別個(gè)體情感效價(jià)，包括正性、中性、負(fù)性3種情感狀態(tài)及21種微表情數(shù)據(jù)。
自動計(jì)算個(gè)體的瞳孔距離，識別眼睛注視方向，監(jiān)測注意狀態(tài)。
實(shí)時(shí)計(jì)算并識別多個(gè)年齡段狀態(tài)，以及個(gè)體屬性信息，如性別、是否佩戴眼鏡。
功能
面部表情自動編碼
面部表情自定義處理參數(shù)模塊，包括實(shí)時(shí)處理及離線處理，如數(shù)據(jù)插值、中值濾波、均值濾波等，支持自定義程度閾值、合并閾值、以及大腦加工時(shí)間。
自動識別并編碼七種基本表情，包括高興、悲傷、厭惡、恐懼、驚訝、生氣、參與度，以0至bai fen zhi bai區(qū)間計(jì)算表情程度值。
計(jì)算多種微表情數(shù)據(jù)，如抬起眉毛內(nèi)角、抬起眉毛外角、皺眉（降低眉毛）、上眼瞼上升、臉頰提升、眼輪匝肌外圈收緊/內(nèi)圈收緊、皺鼻、拉動上嘴唇向上運(yùn)動、拉動人中部位的皮膚向上、拉動嘴角傾斜向上、急劇的嘴唇拉動、收緊嘴角、拉動嘴角向下傾斜、拉動下唇向下、推動下唇向上、撅嘴、嘴角拉伸、收緊雙唇向外翻、眼睛擴(kuò)大、張嘴等。
狀態(tài)識別與預(yù)警反饋
系統(tǒng)內(nèi)嵌情感效價(jià)計(jì)算模型，精確識別積極、中性、消極情感，客觀評價(jià)個(gè)體情緒狀態(tài)，與多模態(tài)數(shù)據(jù)形成客觀有效的印證關(guān)系；
系統(tǒng)能夠自動檢測實(shí)時(shí)跟蹤操作人員頭部朝向，包括俯仰角、偏航角、翻滾角，并測定注視方向，計(jì)算瞳孔間距以及注意狀態(tài)檢測；
結(jié)合人工智能與機(jī)器學(xué)習(xí)算法，進(jìn)一步實(shí)現(xiàn)對操作人員的分心、疲勞、應(yīng)激等狀態(tài)的自動識別以及特定環(huán)境條件下的預(yù)警反饋。
面部表情分析與統(tǒng)計(jì)
實(shí)時(shí)可視化的表情編碼：系統(tǒng)實(shí)時(shí)計(jì)算操作人員的表情狀態(tài)與情緒效價(jià)，在實(shí)驗(yàn)過程中，主試可實(shí)時(shí)查看與監(jiān)測操作人員的表情程度與情緒變化，并做出相應(yīng)的任務(wù)調(diào)整與行為預(yù)警。
自動統(tǒng)計(jì)面部表情數(shù)據(jù)：包括每種面部表情的開始時(shí)間、結(jié)束時(shí)間、di yi次發(fā)生的時(shí)間、總發(fā)生次數(shù)、頻率、每次發(fā)生的時(shí)間、總的持續(xù)時(shí)間、總的持續(xù)時(shí)間在全部觀察時(shí)間中所占的百分比、zui 短的持續(xù)時(shí)間、zui 長的持續(xù)時(shí)間、平均持續(xù)時(shí)間、持續(xù)時(shí)間的標(biāo)準(zhǔn)差、持續(xù)時(shí)間間隔置信區(qū)間等數(shù)據(jù)。
多維度數(shù)據(jù)統(tǒng)計(jì)與二次開發(fā)
多維度數(shù)據(jù)交叉統(tǒng)計(jì)：系統(tǒng)支持面部表情數(shù)據(jù)與其他多模態(tài)數(shù)據(jù)（眼動、腦電、生理、動補(bǔ)、行為等）的同步交叉分析，多個(gè)數(shù)據(jù)源在同一平臺界面呈現(xiàn)，在采集的同時(shí)間軸數(shù)據(jù)里選擇相應(yīng)的時(shí)間片段，可同步觀察和統(tǒng)計(jì)分析所有數(shù)據(jù)流之間的相關(guān)關(guān)系。
具有API開發(fā)接口：面部表情原始數(shù)據(jù)與狀態(tài)分析結(jié)果可以被其他程序?qū)崟r(shí)訪問，可使其它程序?qū)Ρ辉囌叩那榫w進(jìn)行反饋。
同步方案
ErgoLAB人機(jī)環(huán)境同步云平臺可人-機(jī)-環(huán)境多維度數(shù)據(jù)的同步采集與綜合分析，包括眼動追蹤、生理測量、生物力學(xué)、腦電、腦成像、行為、人機(jī)交互、動作姿態(tài)、面部表情、主觀評 價(jià)、時(shí)空行為、模擬器、物理環(huán)境等，為科學(xué)研究及應(yīng)用提供完整的數(shù)據(jù)指標(biāo)。平臺可完成完整的實(shí)驗(yàn)和測評流程，包括項(xiàng)目管理-試驗(yàn)設(shè)計(jì)-同步采集-信號處理-數(shù)據(jù)分析-人工智能應(yīng)用-可視化報(bào)告，支持基于云架構(gòu)技術(shù)的團(tuán)體測試和大數(shù)據(jù)云管理。
