雙目立體成像和顯示的FPGA視頻處理技術(shù)研究
本文選題:立體視覺 + 雙目 ; 參考:《北京理工大學(xué)》2016年碩士論文
【摘要】:伴隨著增強(qiáng)現(xiàn)實(shí)和虛擬現(xiàn)實(shí)等技術(shù)的快速升溫,立體視覺技術(shù)正成為當(dāng)前的研究熱點(diǎn),在軍事、公共安全、工業(yè)生產(chǎn)以及游戲娛樂等領(lǐng)域的應(yīng)用正在快速拓展。通常,計(jì)算機(jī)立體視覺系統(tǒng)是通過雙目立體攝像機(jī)獲取視頻圖像的。但是,不同的計(jì)算機(jī)視覺系統(tǒng),由于用途的差異,設(shè)計(jì)的圖像采集系統(tǒng)都有差異。就立體顯示效果而言,圖像采集系統(tǒng)參數(shù)中影響最大的基線距離。這是因?yàn)橐曈X中樞會將光學(xué)系統(tǒng)的基線距離,默認(rèn)為人的雙眼間距。因此,對于基線距離不等于人雙眼間距的圖像采集系統(tǒng),需要對雙目顯示器的輸出圖像進(jìn)行調(diào)整,以得到比較理想的立體顯示效果。論文首先分析了人眼立體視覺的原理,得到了影響人的立體景深感的最重要因素——雙目圖像的視差。隨后研究了目標(biāo)物體的距離與其雙目視差的關(guān)系。之后,論文對雙目相機(jī)的成像原理進(jìn)行了闡述。根據(jù)上述關(guān)系,論文推導(dǎo)出了雙目立體顯示配準(zhǔn)公式。利用該公式,在已知了雙目立體相機(jī)和雙目顯示器的參數(shù)的基礎(chǔ)之上,根據(jù)目標(biāo)物體的距離,可以實(shí)現(xiàn)對雙目顯示圖像進(jìn)行調(diào)整,從而是觀察者獲得比較理想的立體觀察效果。根據(jù)雙目顯示的調(diào)整公式,實(shí)現(xiàn)對雙目顯示圖像的調(diào)整,目標(biāo)物體的距離是一個必不可少的參數(shù)。為此,論文進(jìn)一步研究了基于雙目顯示的測距系統(tǒng)。實(shí)現(xiàn)雙目測距的首要前提是獲得高精度的雙目攝相機(jī)的參數(shù),所以論文介紹了的張正友相機(jī)標(biāo)定方法。實(shí)現(xiàn)雙目測距的另一個要求是,獲得同目標(biāo)在雙目攝像機(jī)的左右相面上的位置。所以論文接下來討論了SURF圖像特征提取與匹配算法。為了壓縮特征匹配時的計(jì)算量,提高匹配的精度,論文還引入了極線約束。至此,雙目顯示與測距系統(tǒng)的理論框架搭建完成。隨后,論文描述一套在PC平臺完成的驗(yàn)證系統(tǒng),并分析了該系統(tǒng)的實(shí)驗(yàn)結(jié)果,以檢驗(yàn)該系統(tǒng)方案的可行性。為提高系統(tǒng)的性能和便攜性,在論文最后還討論了在基于FPGA的圖像處理系統(tǒng)上完成本套設(shè)計(jì)方案,并提供了攝像機(jī)驅(qū)動模塊,雙目顯示器驅(qū)動模塊以及SUFR算法實(shí)現(xiàn)方案等設(shè)計(jì)思路。
[Abstract]:With the rapid development of augmented reality (AR) and virtual reality (VR) technology, stereo vision technology is becoming a hot research topic, and its applications in military, public safety, industrial production and games and entertainment are expanding rapidly. Usually, a computer stereo vision system acquires video images by binocular stereo cameras. However, different computer vision systems, because of the use of differences, the design of image acquisition systems are different. As far as stereoscopic display effect is concerned, the maximum baseline distance is affected by the parameters of the image acquisition system. This is because the visual center sets the optical system's baseline distance, by default, as human binocular spacing. Therefore, for the image acquisition system whose baseline distance is not equal to the distance between human eyes, it is necessary to adjust the output image of the binocular display to obtain an ideal stereoscopic display effect. Firstly, the principle of human stereoscopic vision is analyzed, and the parallax of binocular image is obtained. Then the relation between the distance of the target object and its binocular parallax is studied. Then, the imaging principle of binocular camera is described. According to the above relation, the registration formula of binocular stereoscopic display is deduced. Based on the known parameters of binocular stereoscopic camera and binocular display, the binocular display image can be adjusted according to the distance of the target object, which is an ideal stereo observation effect for the observer. According to the adjustment formula of binocular display, the distance of the target object is an essential parameter to adjust the binocular display image. Therefore, this paper further studies the ranging system based on binocular display. The first prerequisite to achieve binocular ranging is to obtain the parameters of high precision binocular camera, so the calibration method of Zhang Zhengyou camera is introduced in this paper. Another requirement to achieve binocular ranging is to obtain the position of the same target on the left and right side of the binocular camera. Therefore, this paper discusses the SURF image feature extraction and matching algorithm. In order to compress the computation and improve the accuracy of feature matching, pole constraints are also introduced in this paper. So far, the theoretical framework of binocular display and ranging system is completed. Then, the paper describes a set of verification system completed on PC platform, and analyzes the experimental results of the system to verify the feasibility of the system scheme. In order to improve the performance and portability of the system, in the end of the paper, the design of the system based on FPGA image processing system is discussed, and the camera driving module is provided. The design idea of binocular display driver module and SUFR algorithm.
【學(xué)位授予單位】:北京理工大學(xué)
【學(xué)位級別】:碩士
【學(xué)位授予年份】:2016
【分類號】:TP391.41
【相似文獻(xiàn)】
相關(guān)期刊論文 前10條
1 ;空間探測機(jī)器人立體視覺技術(shù)[J];軍民兩用技術(shù)與產(chǎn)品;2002年01期
2 閆龍;;立體視覺技術(shù)的發(fā)展與應(yīng)用[J];機(jī)電產(chǎn)品開發(fā)與創(chuàng)新;2010年04期
3 黃樺;;3D立體視覺探究活動設(shè)計(jì)[J];赤峰學(xué)院學(xué)報(自然科學(xué)版);2012年10期
4 楊則正;人臉識別中的有效立體視覺[J];管理科學(xué)文摘;1997年08期
5 鄭士貴;人面孔識別主動立體視覺[J];管理科學(xué)文摘;1997年09期
6 郝穎明,朱楓;基于模型的立體視覺的優(yōu)化方法[J];高技術(shù)通訊;2000年10期
7 錢曾波,邱振戈,張永強(qiáng);計(jì)算機(jī)立體視覺研究的進(jìn)展[J];測繪學(xué)院學(xué)報;2001年04期
8 任重,邵軍力;立體視覺中的雙目匹配方法研究[J];信息與控制;2001年S1期
9 鄒國輝,袁保宗;一種基于虛擬平面的立體視覺的重建方法[J];電子與信息學(xué)報;2001年02期
10 張超,沈振康,張淑琴;基于立體視覺的測量技術(shù)[J];系統(tǒng)工程與電子技術(shù);2002年09期
相關(guān)會議論文 前10條
1 王幼生;詹敏;代秋楠;;立體視覺的研究進(jìn)展[A];第十二屆廣東省視光學(xué)學(xué)術(shù)會議專題講座、論文匯編[C];2009年
2 陸曉奮;;立體視覺技術(shù)的現(xiàn)狀與發(fā)展預(yù)測[A];中國圖象圖形學(xué)學(xué)會立體圖象技術(shù)專業(yè)委員會學(xué)術(shù)研討會論文集(第三期)[C];2009年
3 閻冰;趙占娟;遲洪華;;立體視覺及其影響因素[A];中國生物醫(yī)學(xué)工程學(xué)會第六次會員代表大會暨學(xué)術(shù)會議論文摘要匯編[C];2004年
4 任重;邵軍力;;三目立體視覺方法的研究[A];2001年中國智能自動化會議論文集(下冊)[C];2001年
5 靳波;葛霽光;;立體視覺深度刺激誘發(fā)認(rèn)知響應(yīng)數(shù)據(jù)采集系統(tǒng)[A];中國生物醫(yī)學(xué)工程學(xué)會第六次會員代表大會暨學(xué)術(shù)會議論文摘要匯編[C];2004年
6 吳新年;汪云九;;立體視覺計(jì)算模型的惟一性約束[A];新世紀(jì) 新機(jī)遇 新挑戰(zhàn)——知識創(chuàng)新和高新技術(shù)產(chǎn)業(yè)發(fā)展(上冊)[C];2001年
7 李德廣;李科杰;高麗麗;;基于多尺度多方向相位匹配的立體視覺方法[A];第二屆全國信息獲取與處理學(xué)術(shù)會議論文集[C];2004年
8 趙虹;于海濱;劉濟(jì)林;;立體視覺技術(shù)在嵌入式客流統(tǒng)計(jì)系統(tǒng)中的應(yīng)用[A];全國第一屆嵌入式技術(shù)聯(lián)合學(xué)術(shù)會議論文集[C];2006年
9 邱陽;白立芬;李慶祥;徐毓嫻;;基于邊緣和區(qū)域聯(lián)合匹配的立體視覺新方法[A];中國儀器儀表學(xué)會第三屆青年學(xué)術(shù)會議論文集(上)[C];2001年
10 胡志萍;歐宗瑛;李云峰;;海上工作平臺固定用導(dǎo)管架下水運(yùn)動參數(shù)立體視覺測定[A];首屆信息獲取與處理學(xué)術(shù)會議論文集[C];2003年
相關(guān)重要報紙文章 前10條
1 北京武警總隊(duì)醫(yī)院眼科 副主任醫(yī)師 陶海;立體視覺怎么檢查[N];家庭醫(yī)生報;2006年
2 ;八種立體視覺技術(shù)各有千秋[N];中國電子報;2009年
3 本報見習(xí)記者 唐聞佳;你有“《阿凡達(dá)》眩暈癥”嗎[N];文匯報;2010年
4 本報記者 楊明;市場潛力巨大 我國3D信息產(chǎn)業(yè)亟待需政策扶持[N];中國工業(yè)報;2010年
5 武警總醫(yī)院眼科淚器病中心主任 陶海;5種人不宜看3D電視[N];保健時報;2010年
6 本報記者 徐建華;我國3D產(chǎn)業(yè)亟須“健身”[N];中國質(zhì)量報;2010年
7 程曉寧;街畫風(fēng)行 幻景橫生[N];21世紀(jì)經(jīng)濟(jì)報道;2009年
8 王延文;細(xì)微之處保健康[N];中國老年報;2004年
9 武警總醫(yī)院眼科淚器病中心主任 陶海;看3D電影如何保護(hù)好眼睛[N];北京日報;2010年
10 錢 偉;淺色太陽鏡對健康更有益[N];大眾科技報;2005年
相關(guān)博士學(xué)位論文 前10條
1 李輝;煤礦井下救災(zāi)機(jī)器人立體視覺導(dǎo)航關(guān)鍵技術(shù)研究[D];中國礦業(yè)大學(xué);2015年
2 謝利民;基于近場照明的光度立體視覺算法研究[D];華中科技大學(xué);2015年
3 李卓;基于立體視覺技術(shù)的生豬體重估測研究[D];中國農(nóng)業(yè)大學(xué);2016年
4 丁菁汀;立體視覺在實(shí)際應(yīng)用中的若干問題研究[D];浙江大學(xué);2012年
5 林慧英;基于立體視覺的汽車車身與車軸位置偏差檢測系統(tǒng)的研究[D];吉林大學(xué);2008年
6 杜歆;用于導(dǎo)航的立體視覺系統(tǒng)[D];浙江大學(xué);2003年
7 侯建;月球車立體視覺與視覺導(dǎo)航方法研究[D];哈爾濱工業(yè)大學(xué);2007年
8 李戈;基于并行處理的機(jī)器人立體視覺伺服系統(tǒng)研究[D];哈爾濱工業(yè)大學(xué);2007年
9 劉歡;基于立體視覺的多氣囊柔性人體腹部重建研究[D];東華大學(xué);2014年
10 唐克倫;三坐標(biāo)機(jī)與立體視覺的系統(tǒng)集成與信息融合的關(guān)鍵技術(shù)研究[D];重慶大學(xué);2008年
相關(guān)碩士學(xué)位論文 前10條
1 丁希斌;一種基于立體視覺的植物病斑定位獲取技術(shù)研究[D];浙江大學(xué);2015年
2 劉少強(qiáng);基于立體視覺的三維重建方法研究[D];天津理工大學(xué);2015年
3 焦英魁;球面立體視覺三維重建技術(shù)研究[D];天津理工大學(xué);2015年
4 謝鵬;基于立體視覺的特征跟蹤方法研究[D];天津理工大學(xué);2015年
5 周鼎;基于立體視覺的非合作航天器相對狀態(tài)估計(jì)[D];哈爾濱工業(yè)大學(xué);2015年
6 張俊;基于多目立體視覺的真實(shí)人臉重建和測量系統(tǒng)的研究[D];電子科技大學(xué);2015年
7 李陽勤;基于DIBR虛擬視角映射的立體視覺調(diào)整技術(shù)[D];杭州電子科技大學(xué);2015年
8 汪婷;立體視覺顯著性計(jì)算模型的研究及應(yīng)用[D];合肥工業(yè)大學(xué);2015年
9 蔣粉玲;基于LabVIEW的立體視覺控制系統(tǒng)設(shè)計(jì)[D];蘇州科技學(xué)院;2015年
10 劉新月;海報的立體視覺表現(xiàn)[D];吉林藝術(shù)學(xué)院;2015年
,本文編號:1886325
本文鏈接:http://sikaile.net/kejilunwen/ruanjiangongchenglunwen/1886325.html