基于三維感知的虛擬視點(diǎn)繪制研究
發(fā)布時(shí)間:2021-10-22 06:30
人們對視頻觀看體驗(yàn)的不斷追求,使近年來生活中出現(xiàn)了各種新型的視頻應(yīng)用,進(jìn)而催生了計(jì)算機(jī)網(wǎng)絡(luò)技術(shù)和音視頻技術(shù)的不斷發(fā)展。自由視點(diǎn)視頻系統(tǒng)(FVV,Free Viewpoint Video)允許用戶自由選擇觀看視點(diǎn),帶來前所未有的沉浸式互動(dòng)觀看體驗(yàn)。但是該系統(tǒng)需要的數(shù)據(jù)量也相當(dāng)巨大,對采集、編碼、傳輸、解碼、繪制、顯示等各個(gè)流程均提出了更高的要求。因此FVV采用基于深度圖的繪制方法(DIBR,Depth Image Based Rendering),通過在編碼端采集的有限數(shù)量參考視點(diǎn),在解碼端繪制任意位置的虛擬視點(diǎn),極大地降低了FVV傳輸?shù)臄?shù)據(jù)量。DIBR的核心是利用深度信息來還原拍攝場景的三維空間,進(jìn)而實(shí)現(xiàn)視點(diǎn)映射。本文以提高虛擬視點(diǎn)三維感知質(zhì)量為主要目的,研究了基于三維感知的立體虛擬視點(diǎn)質(zhì)量評價(jià)方法和基于深度背景建模的虛擬視點(diǎn)空洞填補(bǔ)算法。(1)立體虛擬視點(diǎn)主要包含兩大失真類型:單視點(diǎn)繪制失真和立體視點(diǎn)不匹配失真。針對單視點(diǎn)繪制失真,首先提取當(dāng)前視點(diǎn)失真圖與參考圖的差異區(qū)域,再針對該差異區(qū)域計(jì)算平均結(jié)構(gòu)相似度指數(shù)(SSIM,Structure Similarity),最后將左右視點(diǎn)指數(shù)...
【文章來源】:寧波大學(xué)浙江省
【文章頁數(shù)】:65 頁
【學(xué)位級別】:碩士
【文章目錄】:
摘要
abstract
引言
1 緒論
1.1 研究背景與意義
1.2 國內(nèi)外研究現(xiàn)狀
1.2.1 立體虛擬視點(diǎn)質(zhì)量評價(jià)
1.2.2 虛擬視點(diǎn)空洞填補(bǔ)方法
1.3 主要工作和創(chuàng)新點(diǎn)
1.4 本文的結(jié)構(gòu)安排
2 自由視點(diǎn)視頻系統(tǒng)和人類視覺感知特性
2.1 自由視點(diǎn)視頻系統(tǒng)
2.1.1 視頻信號的采集
2.1.2 DIBR技術(shù)
2.1.3 虛擬視點(diǎn)失真類型
2.2 人類視覺感知特性
2.2.1 人類視覺系統(tǒng)
2.2.2 視覺感知模型
2.3 本章小結(jié)
3 基于三維感知的立體虛擬視點(diǎn)圖像質(zhì)量評價(jià)方法
3.1 基于感知的立體虛擬視點(diǎn)圖像質(zhì)量評價(jià)模型
3.1.1 單目紋理特征
3.1.2 雙目競爭特征
3.1.3 特征融合
3.2 實(shí)驗(yàn)結(jié)果及分析
3.3 本章小結(jié)
4 基于深度背景建模的虛擬視點(diǎn)空洞填補(bǔ)算法
4.1 空洞成因及特征分析
4.1.1 空洞生成原因
4.1.2 深度時(shí)域直方圖統(tǒng)計(jì)特征分析
4.2 基于深度的時(shí)域穩(wěn)定背景模型
4.2.1 深度背景建模
4.2.2 紋理背景建模
4.2.3 融合和空洞填補(bǔ)
4.3 實(shí)驗(yàn)結(jié)果及分析
4.3.1 實(shí)驗(yàn)設(shè)置
4.3.2 客觀評價(jià)
4.3.3 主觀評價(jià)
4.3.4 閾值選擇
4.4 本章小結(jié)
5 總結(jié)與展望
參考文獻(xiàn)
在學(xué)研究成果
致謝
【參考文獻(xiàn)】:
期刊論文
[1]基于BJND和JNDD的立體視頻深度感知增強(qiáng)技術(shù)綜述[J]. 劉峰,施陽,干宗良,秦雷,陳昌紅. 南京郵電大學(xué)學(xué)報(bào)(自然科學(xué)版). 2015(01)
博士論文
[1]基于人類視覺系統(tǒng)的圖像信息感知和圖像質(zhì)量評價(jià)[D]. 吳金建.西安電子科技大學(xué) 2014
碩士論文
[1]基于視覺感知的深度視頻信號處理[D]. 畢偉.寧波大學(xué) 2013
本文編號:3450559
【文章來源】:寧波大學(xué)浙江省
【文章頁數(shù)】:65 頁
【學(xué)位級別】:碩士
【文章目錄】:
摘要
abstract
引言
1 緒論
1.1 研究背景與意義
1.2 國內(nèi)外研究現(xiàn)狀
1.2.1 立體虛擬視點(diǎn)質(zhì)量評價(jià)
1.2.2 虛擬視點(diǎn)空洞填補(bǔ)方法
1.3 主要工作和創(chuàng)新點(diǎn)
1.4 本文的結(jié)構(gòu)安排
2 自由視點(diǎn)視頻系統(tǒng)和人類視覺感知特性
2.1 自由視點(diǎn)視頻系統(tǒng)
2.1.1 視頻信號的采集
2.1.2 DIBR技術(shù)
2.1.3 虛擬視點(diǎn)失真類型
2.2 人類視覺感知特性
2.2.1 人類視覺系統(tǒng)
2.2.2 視覺感知模型
2.3 本章小結(jié)
3 基于三維感知的立體虛擬視點(diǎn)圖像質(zhì)量評價(jià)方法
3.1 基于感知的立體虛擬視點(diǎn)圖像質(zhì)量評價(jià)模型
3.1.1 單目紋理特征
3.1.2 雙目競爭特征
3.1.3 特征融合
3.2 實(shí)驗(yàn)結(jié)果及分析
3.3 本章小結(jié)
4 基于深度背景建模的虛擬視點(diǎn)空洞填補(bǔ)算法
4.1 空洞成因及特征分析
4.1.1 空洞生成原因
4.1.2 深度時(shí)域直方圖統(tǒng)計(jì)特征分析
4.2 基于深度的時(shí)域穩(wěn)定背景模型
4.2.1 深度背景建模
4.2.2 紋理背景建模
4.2.3 融合和空洞填補(bǔ)
4.3 實(shí)驗(yàn)結(jié)果及分析
4.3.1 實(shí)驗(yàn)設(shè)置
4.3.2 客觀評價(jià)
4.3.3 主觀評價(jià)
4.3.4 閾值選擇
4.4 本章小結(jié)
5 總結(jié)與展望
參考文獻(xiàn)
在學(xué)研究成果
致謝
【參考文獻(xiàn)】:
期刊論文
[1]基于BJND和JNDD的立體視頻深度感知增強(qiáng)技術(shù)綜述[J]. 劉峰,施陽,干宗良,秦雷,陳昌紅. 南京郵電大學(xué)學(xué)報(bào)(自然科學(xué)版). 2015(01)
博士論文
[1]基于人類視覺系統(tǒng)的圖像信息感知和圖像質(zhì)量評價(jià)[D]. 吳金建.西安電子科技大學(xué) 2014
碩士論文
[1]基于視覺感知的深度視頻信號處理[D]. 畢偉.寧波大學(xué) 2013
本文編號:3450559
本文鏈接:http://sikaile.net/kejilunwen/shengwushengchang/3450559.html
最近更新
教材專著