針對(duì)人體動(dòng)作識(shí)別問(wèn)題,現(xiàn)有的方法多是基于人的肢體或手部、手肘等部位,在針對(duì)手指動(dòng)作等微動(dòng)作的識(shí)別問(wèn)題上,常見的動(dòng)態(tài)識(shí)別方法得到的識(shí)別效果并不理想,常常出現(xiàn)識(shí)別不準(zhǔn)確或無(wú)法捕捉手指的運(yùn)動(dòng)狀態(tài)等問(wèn)題。微動(dòng)作的運(yùn)動(dòng)信息更多的表現(xiàn)在手指的運(yùn)動(dòng)狀態(tài)中,利用微動(dòng)作手勢(shì)的運(yùn)動(dòng)狀態(tài)及其運(yùn)動(dòng)周期長(zhǎng)度來(lái)確定一次完整的動(dòng)作,為此類重復(fù)性微動(dòng)作視頻的關(guān)鍵幀提取和特征處理提供了一個(gè)新的方向。關(guān)鍵幀序列是表達(dá)視頻內(nèi)容的一種重要形式,近年來(lái),常見的關(guān)鍵幀提取算法在解決目標(biāo)對(duì)象動(dòng)作幅度較小、內(nèi)容重復(fù)、單鏡頭且場(chǎng)景不變的視頻時(shí)出現(xiàn)關(guān)鍵幀提取不完整、提取的有效信息不充分以及提取的幀圖像冗余等問(wèn)題。感知哈希算法是圖像搜索領(lǐng)域的一種常見方法,但是為本文的微動(dòng)作關(guān)鍵幀提取問(wèn)題提供了一種新的解決思路。在微動(dòng)作視頻中,目標(biāo)對(duì)象運(yùn)動(dòng)的時(shí)空特征包含了其動(dòng)作的全部信息,有效提取視頻中的時(shí)空特征能夠使得網(wǎng)絡(luò)訓(xùn)練更加充分有效。卷積神經(jīng)網(wǎng)絡(luò)常用于提取圖像的空間特征,但是在面對(duì)視頻序列的特征提取時(shí),往往無(wú)法對(duì)時(shí)間序列的特征進(jìn)行有效處理,而長(zhǎng)短時(shí)記憶網(wǎng)絡(luò)的出現(xiàn)為視頻序列的時(shí)間特征提取提供了新的解決思路。為此,本文提出了一種基于微動(dòng)作手勢(shì)的關(guān)鍵幀提... 

【文章來(lái)源】：北京化工大學(xué)北京市 211工程院校 教育部直屬院校

【文章頁(yè)數(shù)】：87 頁(yè)

【學(xué)位級(jí)別】：碩士

【部分圖文】：

圖２－１正弦函數(shù)圖像??Ｆｉｇ．２－１?Ｓｉｎｅ?ｆｕｎｃｔｉｏｎ?ｉｍａｇｅ??

?第二章視頻關(guān)鍵幀序列提取???算法的具體步驟為：??Ｓｔｅｐｌ：導(dǎo)入視頻，并將視頻序列分割成幀圖像序列Ｆｒａｍｅ［／；，／２，．．．，人｝。??Ｓｔｅｐ２：定乂一■個(gè)空的關(guān)鍵巾貞序列的集合。??Ｓｔｅｐ３：通過(guò)公式計(jì)算判斷終止幀的閾值Ｌ??Ｓｔｅｐ４；選擇隨機(jī)幀最為關(guān)鍵幀的起始幀０１）并計(jì)算視頻的周期長(zhǎng)度７；＾，。??ＳｔｅＰ５：將幀數(shù)據(jù)轉(zhuǎn)為灰度圖像來(lái)計(jì)算感知哈希數(shù)組／／，（／，刀。??Ｓｔｅｐ６：計(jì)算下一頓的感知哈希數(shù)組的感知哈希數(shù)組并計(jì)算與起始??幀的漢明距離奴；ｗ。??Ｓｔｅｐ７：判斷漢明距離是否小于閾值夂若漢明距離小于閾值并且與初始幀的??距離大于１／２周期長(zhǎng)度，將該幀插入到關(guān)鍵幀序列■｛丨中，并則停止取后續(xù)??幀，輸出關(guān)鍵幀序列＾妨，…，／＾｝。否則回到Ｓｔｅｐ５取下一幀圖像序??列。??２．４實(shí)例分析??針對(duì)ＭＳＲ?ｇｅｓｔｕｒｅ３Ｄ公開數(shù)據(jù)集中其中一個(gè)手勢(shì)序列，使用本文所提出的關(guān)??鍵幀提取算法進(jìn)行關(guān)鍵幀提齲通過(guò)公開數(shù)據(jù)集網(wǎng)絡(luò)的說(shuō)明得知，每段手勢(shì)序列??中手勢(shì)動(dòng)作的數(shù)目為三個(gè)，每段手勢(shì)序列共有３０幀圖像組成。在錄制時(shí)手勢(shì)的??具體動(dòng)作圖片以及在數(shù)據(jù)集中手勢(shì)的對(duì)應(yīng)動(dòng)作圖片如下圖２－３所示（以３種手勢(shì)??為例）：??ｄＭＭ?ａｉａａ??ａ）?Ｂｌｕｅ?ｇｅｓｔｕｒｅ??ｂ）?Ｇｒｅｅｎ?ｇｅｓｔｕｒｅ??瞧?Ｑ?７１?—ＨＱＢ９??ｃ）?Ｈｕｎｇｒｙ?ｇｅｓｔｕｒｅ??圖２－３ＭＳＲｇｅｓｔｕｒｅ３Ｄ手勢(shì)示意圖??Ｆｉｇ．２－３?ＭＳＲ?ｇｅｓｔｕｒｅ３Ｄ?ｇｅｓｔｕｒｅ?ｄｉａｇｒａｍ??１９??

?第二章視頻關(guān)鍵幀序列提取???的初始幀，取到的隨機(jī)幀的位置為第１２幀圖像，周期長(zhǎng)度為１０。初始幀的８＊８??格式的感知哈希數(shù)組Ａ（Ｕ）如下圖２－５所示：??〇〇〇〇〇〇〇〇??００００１０００??０００００１００??０?０?１０?１０?１１??０００１１１０１??００００１０１１??０?０?１－０?１?１?０?０??００００１０１０??圖２－５關(guān)鍵幀第一幀的感知哈希數(shù)組／／＜／，＿／）的值??Ｆｉｇ．２－５?Ｔｈｅ?ｖａｌｕｅ?ｏｆ?ｔｈｅ?ｄｈａｓｈ?ａｒｒａｙ?ｊ）?ｏｆ?ｔｈｅ?ｆｉｒｓｔ?ｆｒａｍｅ?ｏｆ?ｔｈｅ?ｋｅｙ?ｆｒａｍｅ??其中，上述圖片所示的表格中，在感知哈希數(shù)組中是一種矩陣的形式，行和??列表示的為縮放后的圖像的行和列，即８＊８的縮放規(guī)格，其中的０或１即為差異??值感知哈希數(shù)組的值。在圖像的每行相鄰像素值中進(jìn)行計(jì)算，當(dāng)同一行像素值中??某一位的像素的灰度值小于后一位時(shí)，則后一位像素值變?yōu)椋�，否則變?yōu)椋薄??步驟４．從起始幀的下一幀開始逐幀計(jì)算感知哈希數(shù)組，并與初始的感知哈希數(shù)組??進(jìn)行漢明距離的計(jì)算，若計(jì)算得到的漢明距離小于閾值彡，或是與初始幀的序列??長(zhǎng)度小于１／２７＞＿，則將該幀插入到關(guān)鍵幀序列尺，并讀取下一幀圖像??計(jì)算感知哈希數(shù)組。最終得到關(guān)鍵幀序列的終止幀位置為第２３幀，而關(guān)鍵幀序??列共有１１幀圖像大于１／２周期長(zhǎng)度的５幀，滿足終止取幀條件。終止幀的感知??哈希數(shù)組／／？（／，＿／）為圖２－６所示：??００００００００??０００００１００??０００００１００??００００１０１１??００１００１０１??００００１０１１??００００１１１

【參考文獻(xiàn)】：
期刊論文
[1]基于改進(jìn)隨機(jī)蕨的跟蹤注冊(cè)方法研究[J]. 曹鵬霞,李文新,馬偉蘋.  計(jì)算機(jī)應(yīng)用與軟件. 2019(11)
[2]基于多流卷積神經(jīng)網(wǎng)絡(luò)的動(dòng)態(tài)手勢(shì)識(shí)別[J]. 王增崢,洪昕.  中國(guó)醫(yī)療設(shè)備. 2019(10)
[3]柔性姿態(tài)估計(jì)和時(shí)空特征結(jié)合的乒乓球動(dòng)作視頻片段關(guān)鍵幀提取[J]. 蔡冠藍(lán).  科學(xué)技術(shù)與工程. 2019(25)
[4]基于SIFT算法的大場(chǎng)景視頻拼接算法及優(yōu)化[J]. 楊思燕,賀國(guó)旗,劉如意.  計(jì)算機(jī)科學(xué). 2019(07)
[5]基于深度學(xué)習(xí)的幾何特征匹配方法[J]. 李健,楊祥如,何斌.  計(jì)算機(jī)科學(xué). 2019(07)
[6]改進(jìn)SIFT算法結(jié)合兩級(jí)特征匹配的無(wú)人機(jī)圖像匹配算法[J]. 邵進(jìn)達(dá),楊帥,程琳.  計(jì)算機(jī)科學(xué). 2019(06)
[7]基于混合卷積神經(jīng)網(wǎng)絡(luò)的靜態(tài)手勢(shì)識(shí)別[J]. 石雨鑫,鄧洪敏,郭偉林.  計(jì)算機(jī)科學(xué). 2019(S1)
[8]基于深度學(xué)習(xí)的視頻關(guān)鍵幀提取與視頻檢索[J]. 梁建勝,溫賀平.  控制工程. 2019(05)
[9]穿戴式鋼琴?gòu)椬嗍痔字悄芨兄c手勢(shì)識(shí)別技術(shù)[J]. 葉素芬,賴際舟,呂品,朱超群.  儀器儀表學(xué)報(bào). 2019(05)
[10]雙卷積池化結(jié)構(gòu)的3D-CNN高光譜遙感影像分類方法[J]. 李冠東,張春菊,高飛,張雪英.  中國(guó)圖象圖形學(xué)報(bào). 2019(04)

博士論文
[1]深度學(xué)習(xí)模型的高效訓(xùn)練算法研究[D]. 陳凱.中國(guó)科學(xué)技術(shù)大學(xué) 2016
[2]情感交互式?jīng)Q策方法及其在過(guò)程控制中的應(yīng)用[D]. 宿翀.北京化工大學(xué) 2012

碩士論文
[1]針刺提插補(bǔ)瀉足三里對(duì)血虛證模型家兔紅細(xì)胞計(jì)數(shù)、血紅蛋白量的影響[D]. 劉溫麗.北京中醫(yī)藥大學(xué) 2013
[2]脾經(jīng)穴位不同頻率捻轉(zhuǎn)手法操作對(duì)下腹部皮膚溫度變化影響的研究[D]. 李健睿.長(zhǎng)春中醫(yī)藥大學(xué) 2010
[3]不同頻率捻轉(zhuǎn)手法量效關(guān)系研究[D]. 劉成禹.長(zhǎng)春中醫(yī)藥大學(xué) 2010
[4]手法針灸合谷穴腦功能磁共振研究[D]. 陳鳳英.汕頭大學(xué) 2007



本文編號(hào)：3226589