癱瘓?jiān)谑澜绺鞯囟际且环N常見的疾病,其中的重度癱瘓病人生活無法自理,給患者的心理、家庭和社會(huì)帶來了沉重的負(fù)擔(dān)。腦卒中、車禍、小兒腦性癱瘓、脊椎受傷等都會(huì)導(dǎo)致癱瘓。在重度癱瘓病人中存在著一種特殊的群體,即患者的四肢和軀干無法移動(dòng)、存在語言障礙,但是患者的大腦意識(shí)清醒,可以做出頭部和臉部動(dòng)作。頭部動(dòng)作是指頭部上下左右移動(dòng),臉部動(dòng)作是指眨眼和張、閉嘴。根據(jù)山東某家醫(yī)院患者患病的統(tǒng)計(jì)結(jié)果,該類患者在重度癱瘓群體中占的比例為10%左右。如果可以獲取患者的真實(shí)意圖,再通過康復(fù)機(jī)械裝置就可以讓患者具備一定的自理能力。本課題主要研究?jī)?nèi)容是通過視頻分析患者的真實(shí)意圖,并為此研發(fā)出相應(yīng)的軟件系統(tǒng),其目的是使患者具備一定的自理能力,同時(shí)減輕患者家屬的負(fù)擔(dān)。在研究方法中有主動(dòng)和被動(dòng)兩種方式來獲得患者的真實(shí)意圖。主動(dòng)是指患者有意識(shí)地表達(dá)自己的意圖。當(dāng)患者處于非緊急情況時(shí),患者意識(shí)清醒,根據(jù)患者頭部和臉部可動(dòng)的特點(diǎn),讓患者通過頭部和臉部動(dòng)作主動(dòng)向系統(tǒng)發(fā)出需求指令,然后通過輔助裝置滿足自身的最基本需求(喝水、吃飯、服藥等)。被動(dòng)是指系統(tǒng)根據(jù)患者表情分析出患者的意圖。當(dāng)患者處于緊急情況時(shí),患者可能無法自主發(fā)出指令,系統(tǒng)根據(jù)患者的面部表情變化判定患者的情感狀態(tài),然后根據(jù)患者的情感狀態(tài)分析出患者的真實(shí)需求,并將分析出的結(jié)果反饋給患者。在一定的時(shí)間內(nèi),如果患者可以通過頭部和臉部動(dòng)作完成響應(yīng),則系統(tǒng)會(huì)進(jìn)行相應(yīng)的處理;如果患者沒有響應(yīng),系統(tǒng)則會(huì)通知患者家屬或醫(yī)護(hù)人員。本文工作包括:(1)基于區(qū)域化的頭部動(dòng)作識(shí)別。系統(tǒng)利用Adaboost算法在患者頭部圖像中檢測(cè)出患者的人臉,然后通過人臉中心位置的偏移方向進(jìn)行頭部動(dòng)作識(shí)別。(2)基于等價(jià)局部二值模式(Uniform LBP)紋理特征的臉部動(dòng)作識(shí)別。系統(tǒng)首先根據(jù)三庭五眼的規(guī)則在人臉圖像中切割出患者的眼部和嘴部區(qū)域;然后計(jì)算眼睛和嘴部區(qū)域圖像的Uniform LBP紋理特征圖,并計(jì)算特征圖的統(tǒng)計(jì)直方圖;最后利用k近鄰識(shí)別患者的臉部動(dòng)作。(3)基于深度卷積神經(jīng)網(wǎng)絡(luò)的表情識(shí)別。系統(tǒng)首先通過樣本預(yù)處理(傾斜校正和圖像旋轉(zhuǎn))增加樣本的數(shù)量;然后對(duì)樣本圖像進(jìn)行歸一化處理;最后通過深度學(xué)習(xí)中的卷積神經(jīng)網(wǎng)絡(luò)訓(xùn)練出患者的三個(gè)表情識(shí)別模型。系統(tǒng)在識(shí)別患者表情時(shí),先利用表情模型對(duì)患者表情進(jìn)行粗略分類,然后再對(duì)患者表情進(jìn)行精確分類。本文主要貢獻(xiàn)為:根據(jù)重度癱瘓病人的特點(diǎn),提出了基于Uniform LBP紋理特征的臉部動(dòng)作識(shí)別方法和基于由粗到精策略的表情識(shí)別方法。實(shí)驗(yàn)結(jié)果表明,系統(tǒng)能夠準(zhǔn)確地識(shí)別出人物目標(biāo)的面部表情、頭部和臉部動(dòng)作。下一步會(huì)結(jié)合其他單位的研究?jī)?nèi)容,在相應(yīng)的硬件系統(tǒng)中進(jìn)行調(diào)試和完善。
【學(xué)位單位】：濟(jì)南大學(xué)
【學(xué)位級(jí)別】：碩士
【學(xué)位年份】：2018
【中圖分類】：R459.7;TP181
【部分圖文】：

基于深度學(xué)習(xí)的交互式重度癱瘓病人情感分析研究此類患者的特點(diǎn)，濟(jì)南大學(xué)和其他四家單位共同申報(bào)了山東省科技業(yè)）項(xiàng)目 基于腦機(jī)接口和多源數(shù)據(jù)反饋技術(shù)的康復(fù)服務(wù)機(jī)器人開015ZDXX0801A03）。整個(gè)項(xiàng)目分為五個(gè)部分：基于視頻信息分析的，腦機(jī)接口信號(hào)采集及處理技術(shù)，基于腦機(jī)接口、圖像等多源信息的統(tǒng)設(shè)計(jì)，康復(fù)服務(wù)機(jī)器人本體機(jī)構(gòu)設(shè)計(jì)和可穿戴人體生理參數(shù)在線監(jiān)開發(fā)技術(shù)路線如圖 1.1 所示。

康復(fù)裝置示意

裝置的設(shè)計(jì)可以使系統(tǒng)獲得患者清晰的面部圖像，為接下來的工作減少了很多不必要的麻煩。康復(fù)裝置示意圖如圖 1.2 所示。圖 1.2 康復(fù)裝置示意圖. (a)可以滿足患者起坐和躺臥需求; (b)可以滿足患者左側(cè)身需求; (c)可以滿足患者右側(cè)身需求在圖 1.2 中可以看出，裝置包含 A、B 兩個(gè)云臺(tái)攝像頭、顯示屏、電機(jī)、視頻分析服務(wù)器、圖像采集卡等。雖然患者四肢無法移動(dòng)，但是患者軀干和四肢可能會(huì)出現(xiàn)異常，
【參考文獻(xiàn)】

相關(guān)期刊論文 前10條

1 李祖賀;樊養(yǎng)余;;基于視覺的情感分析研究綜述[J];計(jì)算機(jī)應(yīng)用研究;2015年12期

2 穆靜;陳芳;王長元;;人臉面部表情圖像的隱馬爾科夫建模及情感識(shí)別[J];西安工業(yè)大學(xué)學(xué)報(bào);2015年09期

3 夏海英;徐魯輝;;基于差分紋理的人臉表情識(shí)別[J];計(jì)算機(jī)應(yīng)用研究;2015年11期

4 劉袁緣;陳靚影;俞侃;覃杰;陳超原;;基于樹結(jié)構(gòu)分層隨機(jī)森林在非約束環(huán)境下的頭部姿態(tài)估計(jì)[J];電子與信息學(xué)報(bào);2015年03期

5 尹寶才;王文通;王立春;;深度學(xué)習(xí)研究綜述[J];北京工業(yè)大學(xué)學(xué)報(bào);2015年01期

6 胡進(jìn);侯增廣;陳翼雄;張峰;王衛(wèi)群;;下肢康復(fù)機(jī)器人及其交互控制方法[J];自動(dòng)化學(xué)報(bào);2014年11期

7 宇傳華;崔芳芳;;全球疾病負(fù)擔(dān)研究及其對(duì)我國的啟示[J];公共衛(wèi)生與預(yù)防醫(yī)學(xué);2014年02期

8 王大偉;周軍;梅紅巖;張素娥;;人臉表情識(shí)別綜述[J];計(jì)算機(jī)工程與應(yīng)用;2014年20期

9 唐云祁;孫哲南;譚鐵牛;;頭部姿勢(shì)估計(jì)研究綜述[J];模式識(shí)別與人工智能;2014年03期

10 楊啟志;曹電鋒;趙金海;;上肢康復(fù)機(jī)器人研究現(xiàn)狀的分析[J];機(jī)器人;2013年05期

相關(guān)碩士學(xué)位論文 前1條

1 蔣明敏;基于情感計(jì)算的重度癱瘓患者人機(jī)需求交互研究[D];濟(jì)南大學(xué);2017年

本文編號(hào)：2873527