人體姿態(tài)估計(jì)由于不同外觀、性別、衣物、遮擋、背景和光照條件的不確定性和復(fù)雜性,往往會(huì)給姿態(tài)估計(jì)預(yù)測(cè)帶來(lái)一定困難。如何有效處理不同條件影響,并在此基礎(chǔ)上設(shè)計(jì)出有效的人體姿態(tài)估計(jì)方法,本文研究了基于深度學(xué)習(xí)的人體姿態(tài)估計(jì)的技術(shù)。首先,對(duì)于人體難檢測(cè)部位,采用改善的多尺度特征和多尺寸卷積核,本文提出了一種基于特征金字塔的坐標(biāo)變換網(wǎng)絡(luò)。先網(wǎng)絡(luò)對(duì)圖片提取不同維度和不同分辨率的特征,解決環(huán)境干擾問(wèn)題,再對(duì)遮擋嚴(yán)重的部位和其他難樣例則增大網(wǎng)絡(luò)局部區(qū)域的卷積核,并挖掘難樣本并貢獻(xiàn)網(wǎng)絡(luò)損失,之后將姿態(tài)點(diǎn)定位轉(zhuǎn)為高斯熱點(diǎn)圖定位的過(guò)程,預(yù)測(cè)的高斯熱點(diǎn)圖轉(zhuǎn)為坐標(biāo),實(shí)現(xiàn)端到端訓(xùn)練的過(guò)程。實(shí)驗(yàn)結(jié)果表明,改善的特征有助于識(shí)別難檢測(cè)部位,且網(wǎng)絡(luò)計(jì)算量較少。其次,針對(duì)人體關(guān)鍵點(diǎn)之間非歐幾里得的空間結(jié)構(gòu)關(guān)系,本文提出了一種基于圖卷積神經(jīng)網(wǎng)絡(luò)的人體姿態(tài)估計(jì)的方法,來(lái)提高人體姿態(tài)估計(jì)的精度。該方法輸入的數(shù)據(jù)結(jié)構(gòu)為時(shí)空?qǐng)D結(jié)構(gòu),由單人姿態(tài)點(diǎn)為節(jié)點(diǎn),節(jié)點(diǎn)之間連接為邊,組成單幀的圖結(jié)構(gòu)。該數(shù)據(jù)結(jié)構(gòu)是對(duì)某個(gè)節(jié)點(diǎn)仿射變換后的時(shí)空?qǐng)D結(jié)構(gòu),輸入圖神經(jīng)網(wǎng)絡(luò)分類(lèi)節(jié)點(diǎn)所在的區(qū)域,結(jié)合關(guān)鍵點(diǎn)偏差計(jì)算為坐標(biāo)。實(shí)驗(yàn)結(jié)果表明,該網(wǎng)絡(luò)具有改善檢測(cè)性能的效果... 

【文章來(lái)源】：江西理工大學(xué)江西省

【文章頁(yè)數(shù)】：76 頁(yè)

【學(xué)位級(jí)別】：碩士

【部分圖文】：

在網(wǎng)絡(luò)不同前端網(wǎng)絡(luò)

第三章基于特征金字塔的坐標(biāo)變換網(wǎng)絡(luò)35圖3.10在網(wǎng)絡(luò)識(shí)別關(guān)鍵點(diǎn)流程圖3.6.2目標(biāo)函數(shù)預(yù)測(cè)模塊1的損失函數(shù)采用均方誤差（Mean-SquareError，MSE），作為前端網(wǎng)絡(luò)的損失函數(shù)，如下公式：N2111=2kFNiiniSS(3.16)其中，N為行人樣本數(shù)，kS為高斯熱點(diǎn)圖的標(biāo)簽值如果公式（3.15）無(wú)約束，導(dǎo)致網(wǎng)絡(luò)輸出亮點(diǎn)形狀與標(biāo)簽值相比偏差較大的高斯熱點(diǎn)圖。前端網(wǎng)絡(luò)用于粗取關(guān)鍵點(diǎn)熱點(diǎn)圖，可不考慮正則項(xiàng)。而后端網(wǎng)絡(luò)主要檢測(cè)較難關(guān)鍵點(diǎn)，如果僅通過(guò)轉(zhuǎn)換坐標(biāo)層得到的坐標(biāo)貢獻(xiàn)損失，網(wǎng)絡(luò)可能會(huì)學(xué)出偏大偏小方差的熱點(diǎn)圖。后端網(wǎng)絡(luò)損失用先驗(yàn)解決該問(wèn)題，即對(duì)高斯熱點(diǎn)圖損失函數(shù)增加正則項(xiàng)，如下公式：CTL()+()BNkkzS(3.17)其中，正則項(xiàng)系數(shù)為1，CTL損失函數(shù)為CTL2()kkkkzzμ，坐標(biāo)(x,y)經(jīng)過(guò)均勻化處理后為向量[(2(1),(2(1)]kggggzxw)/wyh)/h，該網(wǎng)絡(luò)的熱點(diǎn)圖損失函數(shù)為()kS，"softmax()kSS。

比較不同模型的結(jié)果


本文編號(hào)：3066676