手語識別是通過計算機(jī)技術(shù)將手語動作轉(zhuǎn)換成文字或聲音的技術(shù),對輔助聾啞人與非手語人群的正常交流具有重要意義。現(xiàn)有的手語識別方法主要分為基于傳感器和基于計算機(jī)視覺的手語識別,硬件依賴度高、設(shè)計部署要求高、維護(hù)成本高。在手語識別中,孤立詞是構(gòu)建連續(xù)句子的基礎(chǔ)和前提。論文利用手語動作對無線信號傳播信道產(chǎn)生的影響,提出基于信道狀態(tài)信息的中國手語孤立詞識別方法。主要研究內(nèi)容包括以下四個方面。首先,提出利用小波變換和主成分分析的去噪方法并結(jié)合插值進(jìn)行無線信號預(yù)處理,消除環(huán)境和商用設(shè)備內(nèi)部狀態(tài)改變引起的噪聲,克服硬件設(shè)備造成的采樣缺陷并保留所有子載波的細(xì)節(jié)特征。其次,提出基于多數(shù)據(jù)流異常檢測的動作分割方案,綜合分析所有數(shù)據(jù)流進(jìn)行精細(xì)動作和相似動作的分割和融合,并提取融合序列的時域特征。再次,對比分析應(yīng)用現(xiàn)有的基于信道狀態(tài)信息的動作識別分類方法進(jìn)行手語孤立詞識別,首次采用極限學(xué)習(xí)機(jī)作為基于無線信號的無設(shè)備感知細(xì)粒度動作分類器,滿足手語孤立詞識別對準(zhǔn)確性和實(shí)時性的要求。最后,分別在會議室和實(shí)驗(yàn)室環(huán)境中采集不同手語動作下的信道狀態(tài)信息數(shù)據(jù),對識別方法進(jìn)行驗(yàn)證和性能評估。實(shí)驗(yàn)結(jié)果顯示,兩種環(huán)境下本文方法的識別... 

【文章來源】：燕山大學(xué)河北省

【文章頁數(shù)】：63 頁

【學(xué)位級別】：碩士

【部分圖文】：

數(shù)據(jù)手套和表面肌電傳感器

雖然表面肌電傳感器相比于數(shù)據(jù)手套，成本更低、舒適度更高，但是由于其結(jié)構(gòu)限制，無法獲取大尺度的手臂動作，如抬手、揮手等，所以可識別的手語相對有限�；趥鞲衅鞯淖R別系統(tǒng)利用可穿戴設(shè)備，如數(shù)據(jù)手套、表面肌電傳感器及一助設(shè)備，可以獲取手部的精細(xì)動作和時序信息，識別準(zhǔn)確率通常比較高，但由本高、穿戴不舒適、行動受限等缺點(diǎn)，使其無法大規(guī)模推廣應(yīng)用。.2.2 基于計算機(jī)視覺的手語識別方法基于計算機(jī)視覺的方法要求被識別對象面對攝像頭做出不同的手語動作，通像頭捕獲動作的運(yùn)動軌跡、手指特征等信息[6]52。早期的研究[17,18]主要是使用單像頭采集平面圖像，然而手是在三維空間中運(yùn)動的，且動作容易遮擋攝像頭，研究人員開始使用多個攝像頭獲取不同維度的運(yùn)動圖像[19,20]。隨著 Kinect、Leap Motion 和 RealSense 等新型體感外設(shè)（如圖 1-2 所示）的出現(xiàn)于計算機(jī)視覺的手語識別獲得更進(jìn)一步的發(fā)展。

CSI與RSSI的類比[38]

【參考文獻(xiàn)】：
期刊論文
[1]威廉姆·斯多基和他的手語語言學(xué)研究評介[J]. 國華.  中國特殊教育. 2006(02)
[2]中國手語和漢語雙語教育初探[J]. 楊軍輝.  中國特殊教育. 2002(01)

博士論文
[1]基于肌電模式的中國手語識別研究及康復(fù)應(yīng)用探索[D]. 李云.中國科學(xué)技術(shù)大學(xué) 2013

碩士論文
[1]融合表面肌電和運(yùn)動傳感器信息的中國手語手勢識別技術(shù)研究[D]. 楊喜東.中國科學(xué)技術(shù)大學(xué) 2016
[2]基于信道狀態(tài)信息的室內(nèi)移動檢測和定位技術(shù)研究[D]. 高溪.燕山大學(xué) 2015



本文編號：2930021