基于表情識別的交互康復(fù)訓(xùn)練系統(tǒng)
發(fā)布時間:2024-01-31 21:04
面部表情識別(Facial Expression Recognition,FER)是根據(jù)已有的情感認知理論對人臉圖像進行情緒識別的過程。在日常溝通交流中表情能夠傳遞豐富的信息,如能理解交互者的情感狀態(tài),則能使對話更順利;同樣地,基于計算機、算法的發(fā)展應(yīng)運而生的人-機交互(Human-Computer Interface,HCI)系統(tǒng),如能感知人類的情感狀態(tài),則能夠增強沉浸度,顯著提高HCI交互體驗。交互體驗的提高如應(yīng)用于康復(fù)訓(xùn)練,則可提高認知障礙者的情緒認知能力。本文以此為出發(fā)點,通過對具有實時性、計算量小的表情識別算法展開研究,并結(jié)合FER和情緒認知障礙者的認知特征,搭建HCI交互康復(fù)訓(xùn)練系統(tǒng)。研究內(nèi)容主要分為以下三個方面:其一,采用深度可分離卷積運算、多尺度信息感知運算結(jié)合特征拼接運算,提出ConcatXception輕量級的卷積神經(jīng)網(wǎng)絡(luò)(Convolution Neutral Network,CNN)。通過深度可分離卷積、全局平均池化層代替全連接層以減少網(wǎng)絡(luò)參數(shù);學(xué)習(xí)聚合運算后的特征通道的權(quán)值信息以獲取更具表征能力的特征;并引入全局信息聚合的特征拼接運算以輔...
【文章頁數(shù)】:73 頁
【學(xué)位級別】:碩士
【部分圖文】:
本文編號:3891547
【文章頁數(shù)】:73 頁
【學(xué)位級別】:碩士
【部分圖文】:
圖4串口控制機器人
年齡、性別、識別圖片信息、識別圖片時間都記錄在一張表格中,在前面板中能夠直觀看到患者識別圖片每次所用時間的變化曲線。上位機用到兩個串口,一個是下位機傳輸數(shù)據(jù)到上位機所要使用的串口,另一個是上位機傳輸指令給機器人的串口。兩個串口都使用VISA來控制。上位機讀取下位機傳輸數(shù)據(jù)的程序如....
圖5查詢的程序框圖
圖6查詢的前面板
和10。通過控制3個口的PWM實現(xiàn)3個舵機轉(zhuǎn)動的角度,從而讓表情機器人的眉毛和嘴巴進行動作。圖4串口控制機器人3.2數(shù)據(jù)處理模塊患者可以通過前面板的“查詢”按鈕,查詢到每個患者在每個圖片上所用的時間,并顯示出次數(shù)和每個構(gòu)成的圖表。查詢的程序框圖如圖5所示。圖5查詢的程序框圖采用一....
本文編號:3891547
本文鏈接:http://sikaile.net/kejilunwen/shengwushengchang/3891547.html
最近更新
教材專著