基于EEG與計(jì)算機(jī)視覺的人臉檢索閉環(huán)系統(tǒng)
本文關(guān)鍵詞:基于EEG與計(jì)算機(jī)視覺的人臉檢索閉環(huán)系統(tǒng)
更多相關(guān)文章: 閉環(huán)系統(tǒng) 腦機(jī)接口 單次ERP檢測 人臉檢索 計(jì)算機(jī)視覺
【摘要】:計(jì)算機(jī)視覺技術(shù)已在大規(guī)模人臉數(shù)據(jù)庫的檢索上取得巨大成功,但是當(dāng)人臉的表情、姿態(tài)、光照出現(xiàn)較大變化時,計(jì)算機(jī)視覺的性能會出現(xiàn)明顯下降。人腦具有強(qiáng)大的人臉識別能力,在表情、姿態(tài)、光照等變化上表現(xiàn)出很強(qiáng)的魯棒性。研究表明,人腦的EEG (Electroencephalography)信號中存在許多與人臉識別相關(guān)的ERP (Event Related Potential)成分,通過單次ERP檢測識別人臉相關(guān)的ERP成分可以實(shí)現(xiàn)快速人臉識別。本文通過基于單次ERP檢測的腦機(jī)接口技術(shù)將入腦強(qiáng)大的人臉識別能力與計(jì)算機(jī)視覺快速的計(jì)算能力結(jié)合,提出腦機(jī)融合的閉環(huán)系統(tǒng),用于快速人臉檢索。該閉環(huán)系統(tǒng)包含人臉圖庫,EEG模塊和計(jì)算機(jī)視覺三大模塊。在閉環(huán)系統(tǒng)的每輪迭代中,人臉圖像通過快速序列視覺范式(Rapid Serial Visual Presentation, RSVP)呈現(xiàn)給被試,EEG模塊通過單次ERP檢測選出被試最感興趣的候選人臉。計(jì)算機(jī)視覺模塊根據(jù)視覺相似度從圖庫中選出與候選集合最相似的人臉圖像在下一輪呈現(xiàn)給被試。經(jīng)過多輪迭代,以圖庫中人臉圖像的相似度排序作為最終的檢索結(jié)果,以平均精度(average precision, AP)作為性能評估準(zhǔn)則。與以往的閉環(huán)圖像檢索系統(tǒng)相比,該系統(tǒng)首次應(yīng)用于難度較大的人臉檢索,并設(shè)計(jì)了基于有監(jiān)督(Support Vector Machine, SVM)和無監(jiān)督(K-means和Self-organizing Map,SOM)的方法用于優(yōu)化閉環(huán)策略,剔除EEG候選圖像中的非目標(biāo)人臉,顯著提高系統(tǒng)的整體性能。離線分析表明,本論文提出的基于有監(jiān)督的目標(biāo)優(yōu)化策略能將EEG候選人臉圖像中目標(biāo)人臉的比例從69.76%提高到96.95%,檢索AP從0.8067提高到0.9044;跓o監(jiān)督學(xué)習(xí)的目標(biāo)優(yōu)化策略則將目標(biāo)人臉的比例提高到95.03%,檢索AP提高到0.9162。在線人臉檢索實(shí)驗(yàn)進(jìn)一步驗(yàn)證了該閉環(huán)系統(tǒng)的優(yōu)越性能。綜上所述,將基于EEG的腦機(jī)接口技術(shù)和計(jì)算機(jī)視覺技術(shù)結(jié)合可克服計(jì)算機(jī)視覺在光照、姿態(tài)和表情上的缺陷,實(shí)現(xiàn)較為快速、準(zhǔn)確的人臉檢索。
【關(guān)鍵詞】:閉環(huán)系統(tǒng) 腦機(jī)接口 單次ERP檢測 人臉檢索 計(jì)算機(jī)視覺
【學(xué)位授予單位】:浙江大學(xué)
【學(xué)位級別】:碩士
【學(xué)位授予年份】:2016
【分類號】:TP391.41
【目錄】:
- 摘要5-6
- Abstract6-13
- 第1章 緒論13-25
- 1.1 研究背景及意義13-14
- 1.2 腦機(jī)接口簡介14-15
- 1.3 事件相關(guān)電位15-17
- 1.4 基于單次ERP檢測的圖像檢索系統(tǒng)17-20
- 1.5 基于EEG和計(jì)算機(jī)視覺的圖像檢索系統(tǒng)20-23
- 1.6 研究目標(biāo)與研究內(nèi)容23-24
- 1.6.1 研究目標(biāo)23
- 1.6.2 研究內(nèi)容23-24
- 1.7 本文結(jié)構(gòu)24-25
- 第2章 實(shí)驗(yàn)范式與閉環(huán)系統(tǒng)軟件平臺設(shè)計(jì)25-33
- 2.1 實(shí)驗(yàn)設(shè)計(jì)25-29
- 2.1.1 基于EEG的人臉檢索實(shí)驗(yàn)范式25-26
- 2.1.2 人臉數(shù)據(jù)庫建立26-27
- 2.1.3 數(shù)據(jù)采集27-29
- 2.2 閉環(huán)系統(tǒng)的軟件平臺設(shè)計(jì)29-32
- 2.2.1 用戶界面29-31
- 2.2.2 EEG模塊31-32
- 2.2.3 計(jì)算機(jī)視覺模塊32
- 2.3 本章小結(jié)32-33
- 第3章 系統(tǒng)模塊實(shí)現(xiàn)與閉環(huán)策略設(shè)計(jì)33-62
- 3.1 EEG模塊33-42
- 3.1.1 腦電信號預(yù)處理和特征提取34-37
- 3.1.2 單次ERP檢測37-42
- 3.2 計(jì)算機(jī)視覺模塊42-44
- 3.2.1 人臉相似度計(jì)算42-43
- 3.2.2 基于相似度的人臉圖像排序43-44
- 3.3 閉環(huán)策略設(shè)計(jì)與離線分析44-60
- 3.3.1 閉環(huán)策略設(shè)計(jì)45-46
- 3.3.2 檢索結(jié)果衡量標(biāo)準(zhǔn)46-47
- 3.3.3 基于有監(jiān)督學(xué)習(xí)的目標(biāo)優(yōu)化閉環(huán)策略47-53
- 3.3.4 基于無監(jiān)督學(xué)習(xí)的目標(biāo)優(yōu)化閉環(huán)策略53-60
- 3.4 本章小結(jié)60-62
- 第4章 閉環(huán)人臉檢索在線實(shí)驗(yàn)62-69
- 4.1 在線實(shí)驗(yàn)設(shè)計(jì)62-63
- 4.2 在線實(shí)驗(yàn)結(jié)果分析63-68
- 4.3 本章小結(jié)68-69
- 第5章 總結(jié)與展望69-71
- 5.1 工作總結(jié)69-70
- 5.2 展望70-71
- 參考文獻(xiàn)71-75
- 作者簡歷75-76
- 致謝76
【相似文獻(xiàn)】
中國期刊全文數(shù)據(jù)庫 前10條
1 高美真;姜曉峰;;人類視覺與計(jì)算機(jī)視覺的比較[J];焦作師范高等?茖W(xué)校學(xué)報;2007年01期
2 徐光yP;;以人為中心的計(jì)算機(jī)視覺應(yīng)用[J];中國圖象圖形學(xué)報;2009年02期
3 韓紅;焦李成;;談計(jì)算機(jī)視覺課程的教學(xué)創(chuàng)新[J];計(jì)算機(jī)教育;2010年19期
4 王振華;胡占義;;2011國際計(jì)算機(jī)視覺大會簡介[J];計(jì)算機(jī)輔助設(shè)計(jì)與圖形學(xué)學(xué)報;2012年02期
5 劉兵;;關(guān)于計(jì)算機(jī)視覺成像的研究分析[J];煤炭技術(shù);2013年06期
6 顧偉康;計(jì)算機(jī)視覺學(xué)的發(fā)展概況[J];浙江大學(xué)學(xué)報;1986年04期
7 蔡愉祖;計(jì)算機(jī)視覺概述[J];系統(tǒng)工程與電子技術(shù);1986年01期
8 戰(zhàn)德臣;陳景春;李仲榮;;計(jì)算機(jī)視覺研究的一種分布式專家系統(tǒng)模型[J];航天控制;1989年02期
9 趙榮椿;計(jì)算機(jī)視覺——未來測控技術(shù)中的重要角色[J];測控技術(shù);1992年01期
10 周國清,唐曉芳;計(jì)算機(jī)視覺及其應(yīng)用[J];中國計(jì)算機(jī)用戶;1996年08期
中國重要會議論文全文數(shù)據(jù)庫 前10條
1 宋小華;歐陽丹彤;;時空推理在計(jì)算機(jī)視覺的應(yīng)用[A];2006年全國理論計(jì)算機(jī)科學(xué)學(xué)術(shù)年會論文集[C];2006年
2 謝麗欣;牟會;王歡;劉明霞;;基于計(jì)算機(jī)視覺的人臉檢測與識別綜述[A];第三屆全國軟件測試會議與移動計(jì)算、柵格、智能化高級論壇論文集[C];2009年
3 陳強(qiáng);孫振國;;計(jì)算機(jī)視覺在焊接中的應(yīng)用[A];第十次全國焊接會議論文集(第1冊)[C];2001年
4 田涌濤;洪錫軍;王有慶;李從心;;計(jì)算機(jī)視覺在先進(jìn)制造技術(shù)中的應(yīng)用[A];面向制造業(yè)的自動化與信息化技術(shù)創(chuàng)新設(shè)計(jì)的基礎(chǔ)技術(shù)——2001年中國機(jī)械工程學(xué)會年會暨第九屆全國特種加工學(xué)術(shù)年會論文集[C];2001年
5 劉敏娟;洪添勝;李震;吳偉斌;劉志壯;;基于計(jì)算機(jī)視覺的荔枝檢測與分級方法[A];紀(jì)念中國農(nóng)業(yè)工程學(xué)會成立30周年暨中國農(nóng)業(yè)工程學(xué)會2009年學(xué)術(shù)年會(CSAE 2009)論文集[C];2009年
6 孫潔瓊;孫明;;基于計(jì)算機(jī)視覺的水果外觀品質(zhì)檢測分級研究現(xiàn)狀[A];中國農(nóng)業(yè)工程學(xué)會電氣信息與自動化專業(yè)委員會、中國電機(jī)工程學(xué)會農(nóng)村電氣化分會科技與教育專委會2010年學(xué)術(shù)年會論文摘要[C];2010年
7 王劃一;王效良;;計(jì)算機(jī)視覺在絎縫機(jī)自動編程及控制中的應(yīng)用[A];第二十屆中國控制會議論文集(下)[C];2001年
8 周紅;劉光蓉;;計(jì)算機(jī)視覺及其在谷物籽粒檢測分級中的應(yīng)用[A];中國糧油學(xué)會第三屆學(xué)術(shù)年會論文選集(下冊)[C];2004年
9 吳彥紅;劉木華;楊君;鄭華東;;大米外觀品質(zhì)的計(jì)算機(jī)視覺在線檢測技術(shù)研究[A];農(nóng)業(yè)機(jī)械化與新農(nóng)村建設(shè)——中國農(nóng)業(yè)機(jī)械學(xué)會2006年學(xué)術(shù)年會論文集(下冊)[C];2006年
10 張慶敏;于龍;;計(jì)算機(jī)視覺在接觸網(wǎng)定位器坡度識別中的應(yīng)用[A];高速鐵路接觸網(wǎng)零部件安全可靠性技術(shù)論文集[C];2013年
中國重要報紙全文數(shù)據(jù)庫 前9條
1 記者 李大慶;我在國際計(jì)算機(jī)視覺算法競賽中摘金[N];科技日報;2011年
2 滕繼濮;不放過一個“壞蛋”[N];糧油市場報;2011年
3 ;生活中的計(jì)算機(jī)視覺[N];中國計(jì)算機(jī)報;2006年
4 王悅承;逾30篇中國論文入選ICCV[N];中國計(jì)算機(jī)報;2005年
5 本報記者 滕繼濮;無損檢測技術(shù):不放過一個“壞蛋”[N];科技日報;2011年
6 本報記者 薛娟;未來搜索:沒有搜索的搜索[N];中國經(jīng)濟(jì)時報;2010年
7 記者 楊杰 實(shí)習(xí)記者 李樂;農(nóng)機(jī)領(lǐng)域喜獲四項(xiàng)大獎[N];中國農(nóng)機(jī)化導(dǎo)報;2009年
8 張明平 記者 趙鳳華;蘋果的氣味“看”出來[N];科技日報;2009年
9 記者 常麗君;新軟件能“預(yù)測”你各年齡段長相[N];科技日報;2014年
中國博士學(xué)位論文全文數(shù)據(jù)庫 前10條
1 王強(qiáng);基于幾何代數(shù)的計(jì)算機(jī)視覺問題研究[D];國防科學(xué)技術(shù)大學(xué);2013年
2 王任大;基于計(jì)算機(jī)視覺的手勢交互技術(shù)及其在航海中的應(yīng)用[D];大連海事大學(xué);2014年
3 賀文驊;基于計(jì)算機(jī)視覺的復(fù)雜場景下目標(biāo)跟蹤研究[D];西安電子科技大學(xué);2015年
4 潘磊慶;基于計(jì)算機(jī)視覺和聲學(xué)技術(shù)融合檢測雞蛋品質(zhì)的研究[D];南京農(nóng)業(yè)大學(xué);2007年
5 孔明;顆粒粒徑和形態(tài)計(jì)算機(jī)視覺測量方法研究[D];東南大學(xué);2005年
6 劉釗;基于計(jì)算智能的計(jì)算機(jī)視覺及其應(yīng)用研究[D];武漢科技大學(xué);2011年
7 李慶中;蘋果自動分級中計(jì)算機(jī)視覺信息快速獲取與處理技術(shù)的研究[D];中國農(nóng)業(yè)大學(xué);2000年
8 謝存;計(jì)算機(jī)視覺中若干問題實(shí)現(xiàn)技術(shù)和算法的研究[D];大連理工大學(xué);2002年
9 趙書濤;基于計(jì)算機(jī)視覺的直讀儀表校驗(yàn)方法研究[D];華北電力大學(xué)(河北);2006年
10 柴阿麗;基于計(jì)算機(jī)視覺和光譜分析技術(shù)的蔬菜葉部病害診斷研究[D];中國農(nóng)業(yè)科學(xué)院;2011年
中國碩士學(xué)位論文全文數(shù)據(jù)庫 前10條
1 王福香;基于計(jì)算機(jī)視覺的馬鈴薯外部缺陷檢測方法研究[D];內(nèi)蒙古農(nóng)業(yè)大學(xué);2015年
2 余饒東;基于腦波與計(jì)算機(jī)視覺的注意力檢測技術(shù)在E-Learning中的應(yīng)用研究[D];昆明理工大學(xué);2015年
3 李想;基于計(jì)算機(jī)視覺的花卉分級系統(tǒng)研究[D];天津理工大學(xué);2015年
4 吳林林;基于計(jì)算機(jī)視覺的皮革測配色研究[D];陜西科技大學(xué);2015年
5 龍怡霖;基于計(jì)算機(jī)視覺的雜草種子鑒別[D];西北農(nóng)林科技大學(xué);2015年
6 謝艷鵬;面向細(xì)胞行為辨識的計(jì)算機(jī)視覺研究與應(yīng)用[D];沈陽理工大學(xué);2015年
7 丁僑俊;基于計(jì)算機(jī)視覺的智能停車場引導(dǎo)系統(tǒng)研究[D];福建師范大學(xué);2015年
8 王鵬博;多態(tài)并行機(jī)上的OpenVX系統(tǒng)實(shí)現(xiàn)[D];西安郵電大學(xué);2015年
9 周志強(qiáng);基于計(jì)算機(jī)視覺的指針式電表校驗(yàn)的關(guān)鍵技術(shù)研究[D];南昌大學(xué);2015年
10 陳玉潔;基于計(jì)算機(jī)視覺的外膜厚度測量方法的研究[D];南昌航空大學(xué);2015年
,本文編號:893259
本文鏈接:http://sikaile.net/kejilunwen/ruanjiangongchenglunwen/893259.html