基于最優(yōu)深度預(yù)測(cè)的VR視頻幀內(nèi)編碼算法研究
發(fā)布時(shí)間:2021-06-12 04:13
當(dāng)前,虛擬現(xiàn)實(shí)(Virtual Reality,簡(jiǎn)稱(chēng)VR)技術(shù)發(fā)展越來(lái)越快,應(yīng)用越來(lái)越廣泛,虛擬現(xiàn)實(shí)視頻是虛擬現(xiàn)實(shí)技術(shù)的重要應(yīng)用領(lǐng)域,F(xiàn)階段,虛擬現(xiàn)實(shí)視頻一般先投影,然后用傳統(tǒng)視頻編碼框架(如HEVC)進(jìn)行編碼。由于虛擬現(xiàn)實(shí)視頻高幀率高分辨率的特點(diǎn),視頻幀內(nèi)編碼過(guò)程中遍歷各尺寸編碼單元(CU)產(chǎn)生的計(jì)算量更高,編碼速度相比傳統(tǒng)視頻更慢,并且虛擬現(xiàn)實(shí)視頻在編碼時(shí),沒(méi)有針對(duì)不同投影格式的特點(diǎn)做出優(yōu)化。論文對(duì)虛擬現(xiàn)實(shí)視頻的特點(diǎn)進(jìn)行了分析,對(duì)于虛擬現(xiàn)實(shí)視頻編碼算法進(jìn)行了優(yōu)化,重點(diǎn)研究虛擬現(xiàn)實(shí)視頻幀內(nèi)編碼CU快速劃分算法,并將快速劃分算法針對(duì)虛擬現(xiàn)實(shí)視頻投影格式的特性進(jìn)行優(yōu)化,設(shè)計(jì)了基于最優(yōu)深度預(yù)測(cè)的CU快速劃分算法,以及基于緯度加權(quán)編碼比特?cái)?shù)的CU劃分提前終止算法。論文的主要工作和創(chuàng)新點(diǎn)如下:(1)論文提出了一種基于LCU深度預(yù)測(cè)的CU快速劃分算法,通過(guò)預(yù)測(cè)最大編碼單元(LCU)深度來(lái)跳過(guò)部分尺寸CU的計(jì)算。算法使用Sobel算子得到LCU紋理特征,分析LCU紋理特征與LCU深度的關(guān)系,使用KNN分類(lèi)器來(lái)預(yù)測(cè)LCU的深度。為了使KNN訓(xùn)練集數(shù)據(jù)更適應(yīng)待編碼視頻,論文將視頻分為預(yù)測(cè)幀和訓(xùn)練幀,訓(xùn)...
【文章來(lái)源】:北方工業(yè)大學(xué)北京市
【文章頁(yè)數(shù)】:59 頁(yè)
【學(xué)位級(jí)別】:碩士
【部分圖文】:
圖2-1虛擬現(xiàn)實(shí)視頻的編碼過(guò)程??6??
第二章虛擬現(xiàn)實(shí)視頻編碼技術(shù)介紹??2.1.2虛擬現(xiàn)實(shí)視頻的投影??360Lib中通過(guò)3D-XYZ坐標(biāo)系描述虛擬現(xiàn)實(shí)視頻中的3D場(chǎng)景如圖2-2??所示,在3D坐標(biāo)系中以經(jīng)度和緯度來(lái)表示球形的視野。從視頻球體的中心開(kāi)始,??X軸的方向是虛擬現(xiàn)實(shí)視頻球體的正前方,Y軸的方向朝向球體的頂部,Z軸指??向球體的右側(cè),3D坐標(biāo)系支持旋轉(zhuǎn),用經(jīng)度和緯度進(jìn)行采樣。經(jīng)度是從X軸起,??沿逆時(shí)針?lè)较虻慕嵌,緯度則為從赤道向Y軸方向偏轉(zhuǎn)的角度[25]。??A??A6??圖2-2虛擬現(xiàn)實(shí)視頻中的3D坐標(biāo)系??在現(xiàn)有的虛擬現(xiàn)實(shí)視頻投影格式中,有些投影格式里只有一個(gè)面,比如ERP,??有的則包含多個(gè)面,如立方體投影CMP就包含了正方體展開(kāi)的6個(gè)面【26〗。??圖2-3是一個(gè)使用ERP格式投影后的虛擬現(xiàn)實(shí)視頻,它被投影后被映射到??二維平面上
第二章虛擬現(xiàn)實(shí)視頻編碼技術(shù)介紹??2.1.2虛擬現(xiàn)實(shí)視頻的投影??360Lib中通過(guò)3D-XYZ坐標(biāo)系描述虛擬現(xiàn)實(shí)視頻中的3D場(chǎng)景如圖2-2??所示,在3D坐標(biāo)系中以經(jīng)度和緯度來(lái)表示球形的視野。從視頻球體的中心開(kāi)始,??X軸的方向是虛擬現(xiàn)實(shí)視頻球體的正前方,Y軸的方向朝向球體的頂部,Z軸指??向球體的右側(cè),3D坐標(biāo)系支持旋轉(zhuǎn),用經(jīng)度和緯度進(jìn)行采樣。經(jīng)度是從X軸起,??沿逆時(shí)針?lè)较虻慕嵌,緯度則為從赤道向Y軸方向偏轉(zhuǎn)的角度[25]。??A??A6??圖2-2虛擬現(xiàn)實(shí)視頻中的3D坐標(biāo)系??在現(xiàn)有的虛擬現(xiàn)實(shí)視頻投影格式中,有些投影格式里只有一個(gè)面,比如ERP,??有的則包含多個(gè)面,如立方體投影CMP就包含了正方體展開(kāi)的6個(gè)面【26〗。??圖2-3是一個(gè)使用ERP格式投影后的虛擬現(xiàn)實(shí)視頻,它被投影后被映射到??二維平面上
本文編號(hào):3225926
【文章來(lái)源】:北方工業(yè)大學(xué)北京市
【文章頁(yè)數(shù)】:59 頁(yè)
【學(xué)位級(jí)別】:碩士
【部分圖文】:
圖2-1虛擬現(xiàn)實(shí)視頻的編碼過(guò)程??6??
第二章虛擬現(xiàn)實(shí)視頻編碼技術(shù)介紹??2.1.2虛擬現(xiàn)實(shí)視頻的投影??360Lib中通過(guò)3D-XYZ坐標(biāo)系描述虛擬現(xiàn)實(shí)視頻中的3D場(chǎng)景如圖2-2??所示,在3D坐標(biāo)系中以經(jīng)度和緯度來(lái)表示球形的視野。從視頻球體的中心開(kāi)始,??X軸的方向是虛擬現(xiàn)實(shí)視頻球體的正前方,Y軸的方向朝向球體的頂部,Z軸指??向球體的右側(cè),3D坐標(biāo)系支持旋轉(zhuǎn),用經(jīng)度和緯度進(jìn)行采樣。經(jīng)度是從X軸起,??沿逆時(shí)針?lè)较虻慕嵌,緯度則為從赤道向Y軸方向偏轉(zhuǎn)的角度[25]。??A??A6??圖2-2虛擬現(xiàn)實(shí)視頻中的3D坐標(biāo)系??在現(xiàn)有的虛擬現(xiàn)實(shí)視頻投影格式中,有些投影格式里只有一個(gè)面,比如ERP,??有的則包含多個(gè)面,如立方體投影CMP就包含了正方體展開(kāi)的6個(gè)面【26〗。??圖2-3是一個(gè)使用ERP格式投影后的虛擬現(xiàn)實(shí)視頻,它被投影后被映射到??二維平面上
第二章虛擬現(xiàn)實(shí)視頻編碼技術(shù)介紹??2.1.2虛擬現(xiàn)實(shí)視頻的投影??360Lib中通過(guò)3D-XYZ坐標(biāo)系描述虛擬現(xiàn)實(shí)視頻中的3D場(chǎng)景如圖2-2??所示,在3D坐標(biāo)系中以經(jīng)度和緯度來(lái)表示球形的視野。從視頻球體的中心開(kāi)始,??X軸的方向是虛擬現(xiàn)實(shí)視頻球體的正前方,Y軸的方向朝向球體的頂部,Z軸指??向球體的右側(cè),3D坐標(biāo)系支持旋轉(zhuǎn),用經(jīng)度和緯度進(jìn)行采樣。經(jīng)度是從X軸起,??沿逆時(shí)針?lè)较虻慕嵌,緯度則為從赤道向Y軸方向偏轉(zhuǎn)的角度[25]。??A??A6??圖2-2虛擬現(xiàn)實(shí)視頻中的3D坐標(biāo)系??在現(xiàn)有的虛擬現(xiàn)實(shí)視頻投影格式中,有些投影格式里只有一個(gè)面,比如ERP,??有的則包含多個(gè)面,如立方體投影CMP就包含了正方體展開(kāi)的6個(gè)面【26〗。??圖2-3是一個(gè)使用ERP格式投影后的虛擬現(xiàn)實(shí)視頻,它被投影后被映射到??二維平面上
本文編號(hào):3225926
本文鏈接:http://sikaile.net/kejilunwen/shengwushengchang/3225926.html
最近更新
教材專(zhuān)著