【摘要】：面部表情重建的實(shí)時(shí)性與重建效果的真實(shí)性是人臉表情動(dòng)畫(huà)的關(guān)鍵問(wèn)題,提出一種基于Kinect人臉追蹤和幾何變形技術(shù)的面部表情快速重建新方法。使用微軟的Kinect設(shè)備識(shí)別出表演者面部并記錄其特征點(diǎn)數(shù)據(jù),并利用捕捉到的特征點(diǎn)建立覆蓋人臉的網(wǎng)格模型,從中選取變形使用的控制點(diǎn)數(shù)據(jù),由于Kinect可以實(shí)時(shí)地自動(dòng)追蹤表演者面部,由此實(shí)現(xiàn)了利用三種不同變形算法對(duì)目標(biāo)模型實(shí)時(shí)快速重建。實(shí)驗(yàn)結(jié)果表明,該方法簡(jiǎn)單易實(shí)施,不用在表演者面部做任何標(biāo)定,可以自動(dòng)地將人臉表情動(dòng)作遷移到目標(biāo)模型上,實(shí)現(xiàn)人臉表情快速重建,并且保證目標(biāo)模型表情真實(shí)自然。
[Abstract]:The real time and authenticity of facial expression reconstruction are the key problems of facial expression animation. A new method of facial expression reconstruction based on Kinect face tracking and geometric deformation technology is proposed. Using Microsoft's Kinect device to recognize the performer's face and record its feature point data, and using the captured feature points to establish a mesh model covering the face, and select the control point data used in the deformation. Because Kinect can automatically track the performer's face in real time, three different deformation algorithms can be used to reconstruct the target model in real time and fast. The experimental results show that the method is simple and easy to implement, and can automatically transfer facial expression action to the target model without any calibration on the performer's face, so that the facial expression can be reconstructed quickly, and the facial expression of the target model can be guaranteed to be real and natural.
【作者單位】： 河北工業(yè)大學(xué)計(jì)算機(jī)科學(xué)與軟件學(xué)院;河北省大數(shù)據(jù)計(jì)算重點(diǎn)實(shí)驗(yàn)室;
【基金】：河北省引進(jìn)留學(xué)人員資助項(xiàng)目(No.C2013003015) 河北省科技計(jì)劃項(xiàng)目(No.15210124) 河北省高等學(xué)�？茖W(xué)技術(shù)研究項(xiàng)目(No.Z2015105)
【分類(lèi)號(hào)】：TP391.41

【參考文獻(xiàn)】

相關(guān)期刊論文 前4條

1 萬(wàn)賢美;金小剛;;時(shí)空人臉表情動(dòng)畫(huà)編輯[J];計(jì)算機(jī)輔助設(shè)計(jì)與圖形學(xué)學(xué)報(bào);2013年08期

2 石曼銀;;Kinect技術(shù)與工作原理的研究[J];哈爾濱師范大學(xué)自然科學(xué)學(xué)報(bào);2013年03期

3 張滿(mǎn)囤;李智;吳鴻濤;;表情動(dòng)畫(huà)技術(shù)和應(yīng)用綜述[J];河北工業(yè)大學(xué)學(xué)報(bào);2007年05期

4 金小剛,鮑虎軍,彭群生;計(jì)算機(jī)動(dòng)畫(huà)技術(shù)綜述[J];軟件學(xué)報(bào);1997年04期

相關(guān)碩士學(xué)位論文 前3條

1 孫晨;表演驅(qū)動(dòng)的實(shí)時(shí)人臉表情動(dòng)畫(huà)合成[D];浙江大學(xué);2014年

2 嚴(yán)若鶴;基于三維網(wǎng)格模型的參數(shù)化人臉表情模擬方法研究[D];廈門(mén)大學(xué);2009年

3 岳振;個(gè)性化人臉建模技術(shù)研究[D];浙江大學(xué);2008年

【共引文獻(xiàn)】

相關(guān)期刊論文 前10條

1 袁帥英;郭大波;;一種基于彩色+深度的人臉識(shí)別算法[J];測(cè)試技術(shù)學(xué)報(bào);2017年03期

2 武乾坤;胡冰;蘭浩;;基于Android+Kinect的失能老人自助系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)[J];計(jì)算機(jī)技術(shù)與發(fā)展;2017年04期

3 楊竹;王洪源;陳慕羿;;Unity3D中的Kinect聲源定位與人機(jī)交互技術(shù)[J];沈陽(yáng)理工大學(xué)學(xué)報(bào);2017年01期

4 李春曉;孫瑞志;戴佚舟;蔡賽華;李騫;李嘉瑤;;基于Unity 3D的中國(guó)古代農(nóng)耕虛擬場(chǎng)景智能展示平臺(tái)[J];農(nóng)業(yè)工程學(xué)報(bào);2017年S1期

5 邢燕;樊文;檀結(jié)慶;許任政;;一類(lèi)C~2連續(xù)的單位四元數(shù)插值樣條曲線(xiàn)[J];計(jì)算機(jī)輔助設(shè)計(jì)與圖形學(xué)學(xué)報(bào);2017年01期

6 林瑞;王俊英;孫水發(fā);董方敏;;基于Kinect的骨骼配準(zhǔn)的人體三維重建[J];信息通信;2016年12期

7 蔡凌豪;;基于增強(qiáng)實(shí)境的地形設(shè)計(jì)沙盤(pán)系統(tǒng)研究[J];西部人居環(huán)境學(xué)刊;2016年04期

8 張滿(mǎn)囤;霍江雷;單新媛;王小芳;吳鴻韜;;基于Kinect與網(wǎng)格幾何變形的人臉表情動(dòng)畫(huà)[J];計(jì)算機(jī)工程與應(yīng)用;2017年14期

9 代鈺洪;;計(jì)算機(jī)動(dòng)畫(huà)發(fā)展歷程及特征分析[J];信息記錄材料;2016年04期

10 何欽政;王運(yùn)巧;;基于Kinect的人臉表情捕捉及動(dòng)畫(huà)模擬系統(tǒng)研究[J];圖學(xué)學(xué)報(bào);2016年03期

相關(guān)碩士學(xué)位論文 前10條

1 于佳駿;數(shù)據(jù)驅(qū)動(dòng)的人像卡通與表情動(dòng)畫(huà)生成技術(shù)[D];上海大學(xué);2016年

2 趙歡;三維人臉建模及表情動(dòng)畫(huà)合成[D];新疆大學(xué);2015年

3 葛新杰;基于運(yùn)動(dòng)捕捉數(shù)據(jù)的人臉表情動(dòng)畫(huà)研究[D];河北工業(yè)大學(xué);2015年

4 王杰雄;虛擬手術(shù)中肝臟個(gè)性化信息獲取與模型驅(qū)動(dòng)方法研究[D];福州大學(xué);2014年

5 孫園園;面向客戶(hù)滿(mǎn)意的人像產(chǎn)品三維建模相似度提升及評(píng)價(jià)技術(shù)研究[D];重慶大學(xué);2014年

6 陳續(xù)旭;基于Candide-3模型的人臉圖像表情生成研究[D];山東財(cái)經(jīng)大學(xué);2014年

7 李方芬;數(shù)字化試鏡裝置的研究與開(kāi)發(fā)[D];廣東工業(yè)大學(xué);2013年

8 馬曉磊;四維人臉表情識(shí)別[D];北方工業(yè)大學(xué);2012年

9 高立;基于圖像變形的人臉表情擬合研究[D];云南大學(xué);2012年

10 徐雪絨;基于單張正面照片的三維人臉建模及表情合成的研究[D];西南交通大學(xué);2011年

【二級(jí)參考文獻(xiàn)】

相關(guān)期刊論文 前3條

1 王玉順;肖俊;莊越挺;王宇杰;;基于運(yùn)動(dòng)傳播和Isomap分析的三維人臉動(dòng)畫(huà)編輯與合成[J];計(jì)算機(jī)輔助設(shè)計(jì)與圖形學(xué)學(xué)報(bào);2008年12期

2 王奎武,董蘭芳,王洵,陳意云;基于MPEG-4的人臉變形算法的研究[J];計(jì)算機(jī)輔助設(shè)計(jì)與圖形學(xué)學(xué)報(bào);2002年01期

3 金小剛，鮑虎軍，彭群生;一種新的基于factor　curve的變形控制方法[J];軟件學(xué)報(bào);1996年09期

相關(guān)碩士學(xué)位論文 前7條

1 雷麗坤;AAM人臉特征點(diǎn)定位及在表情動(dòng)畫(huà)中的應(yīng)用[D];北京交通大學(xué);2010年

2 普波;基于視頻的三維人臉動(dòng)畫(huà)驅(qū)動(dòng)的設(shè)計(jì)與實(shí)現(xiàn)[D];電子科技大學(xué);2010年

3 韓煒;基于特征提取的三維人臉動(dòng)畫(huà)的設(shè)計(jì)與實(shí)現(xiàn)[D];電子科技大學(xué);2009年

4 劉潔娟;基于MPEG-4的人臉建模和動(dòng)畫(huà)實(shí)現(xiàn)研究[D];華東師范大學(xué);2008年

5 李想;骨骼皮膚綁定技術(shù)的研究及實(shí)現(xiàn)[D];浙江大學(xué);2006年

6 陳廓;基于區(qū)域控制模型的人臉重建技術(shù)及應(yīng)用[D];浙江大學(xué);2006年

7 陳亞勇;基于文字驅(qū)動(dòng)的人臉動(dòng)畫(huà)及其人臉模型的快速重建[D];浙江大學(xué);2002年

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 萬(wàn)賢美;金小剛;;真實(shí)感3D人臉表情合成技術(shù)研究進(jìn)展[J];計(jì)算機(jī)輔助設(shè)計(jì)與圖形學(xué)學(xué)報(bào);2014年02期

2 左坤隆,劉文耀;基于活動(dòng)外觀(guān)模型的人臉表情分析與識(shí)別[J];光電子·激光;2004年07期

3 陳靜,董平,楊國(guó)為;人臉表情動(dòng)畫(huà)[J];微計(jì)算機(jī)信息;2004年12期

4 李旭東,張振躍;多表情源的人臉表情合成技術(shù)[J];計(jì)算機(jī)輔助設(shè)計(jì)與圖形學(xué)學(xué)報(bào);2005年01期

5 劉偉鋒;汪增福;;面向人臉表情分析的表情空間模型[J];中國(guó)科學(xué)技術(shù)大學(xué)學(xué)報(bào);2009年02期

6 楊康;陳曉;彭國(guó)華;;基于統(tǒng)計(jì)學(xué)習(xí)的人臉表情分類(lèi)[J];計(jì)算機(jī)仿真;2009年06期

7 續(xù)爽;賈云得;;基于表情相似性的人臉表情流形[J];軟件學(xué)報(bào);2009年08期

8 杜志軍;王陽(yáng)生;;利用主動(dòng)外觀(guān)模型合成動(dòng)態(tài)人臉表情[J];計(jì)算機(jī)輔助設(shè)計(jì)與圖形學(xué)學(xué)報(bào);2009年11期

9 丁賓;邵曉根;孫天凱;杜志軍;;表演驅(qū)動(dòng)的二維人臉表情合成[J];計(jì)算機(jī)工程與設(shè)計(jì);2012年08期

10 萬(wàn)賢美;金小剛;;時(shí)空人臉表情動(dòng)畫(huà)編輯[J];計(jì)算機(jī)輔助設(shè)計(jì)與圖形學(xué)學(xué)報(bào);2013年08期

相關(guān)會(huì)議論文 前4條

1 張楠;耿雪;張有為;;人臉表情誘因分析[A];第十三屆全國(guó)信號(hào)處理學(xué)術(shù)年會(huì)（CCSP-2007）論文集[C];2007年

2 唐京海;應(yīng)自爐;張有為;;人機(jī)自然交互過(guò)程中情態(tài)的識(shí)別與融合[A];第十二屆全國(guó)信號(hào)處理學(xué)術(shù)年會(huì)（CCSP-2005）論文集[C];2005年

3 陳輝;張家樹(shù);;人臉表情的混沌仿生識(shí)別[A];第二屆全國(guó)信息獲取與處理學(xué)術(shù)會(huì)議論文集[C];2004年

4 陶建華;譚鐵牛;;語(yǔ)音和人臉表情同步的雙模態(tài)情感表達(dá)研究[A];第一屆中國(guó)情感計(jì)算及智能交互學(xué)術(shù)會(huì)議論文集[C];2003年

相關(guān)博士學(xué)位論文 前10條

1 萬(wàn)賢美;真實(shí)感人臉表情合成的關(guān)鍵技術(shù)研究[D];浙江大學(xué);2012年

2 蔣斌;魯棒人臉表情識(shí)方法研究[D];北京工業(yè)大學(xué);2014年

3 宋明黎;人臉表情的識(shí)別、重建與合成[D];浙江大學(xué);2005年

4 左坤隆;人臉表情自動(dòng)分析與識(shí)別系統(tǒng)的研究[D];天津大學(xué);2004年

5 常江龍;三維人臉表情合成研究[D];中國(guó)科學(xué)技術(shù)大學(xué);2009年

6 於俊;低比特率真實(shí)感人臉視頻編碼研究[D];中國(guó)科學(xué)技術(shù)大學(xué);2010年

7 王磊;人臉表情自動(dòng)提取與跟蹤技術(shù)研究[D];湖南大學(xué);2007年

8 王進(jìn);基于視頻的人臉表情建模研究[D];浙江大學(xué);2003年

9 方小勇;人臉運(yùn)動(dòng)捕捉數(shù)據(jù)處理及表情動(dòng)畫(huà)重構(gòu)研究[D];大連理工大學(xué);2010年

10 Ebenezer Owusu;[D];江蘇大學(xué);2014年

相關(guān)碩士學(xué)位論文 前10條

1 嚴(yán)政;人臉表情運(yùn)動(dòng)單元識(shí)別系統(tǒng)[D];杭州師范大學(xué);2015年

2 趙靜;基于樹(shù)結(jié)構(gòu)的人臉屬性識(shí)別[D];中國(guó)礦業(yè)大學(xué);2015年

3 葛新杰;基于運(yùn)動(dòng)捕捉數(shù)據(jù)的人臉表情動(dòng)畫(huà)研究[D];河北工業(yè)大學(xué);2015年

4 屈美娟;面部情感特征描述及識(shí)別方法研究[D];西安工業(yè)大學(xué);2013年

5 產(chǎn)文濤;基于卷積神經(jīng)網(wǎng)絡(luò)的人臉表情和性別識(shí)別[D];安徽大學(xué);2016年

6 詹輝煌;人臉表情協(xié)同識(shí)別方法研究[D];福州大學(xué);2013年

7 周穎;標(biāo)記分布在人臉圖像屬性識(shí)別上的應(yīng)用[D];東南大學(xué);2016年

8 甘熒;自然場(chǎng)景下人臉表情數(shù)據(jù)集的構(gòu)建與應(yīng)用研究[D];江西師范大學(xué);2016年

9 付雪平;基于圖像識(shí)別的人臉表情特征的提取分析[D];深圳大學(xué);2017年

10 陳輝;人臉表情自動(dòng)識(shí)別系統(tǒng)[D];西南交通大學(xué);2005年

，

本文編號(hào)：2155979