基于視覺感知特性的HEVC CTU層碼率控制算法研究
發(fā)布時(shí)間:2021-06-03 17:30
高效視頻編碼(High Efficiency Video Coding,HEVC)是編碼標(biāo)準(zhǔn)H.264/AVC的繼承與發(fā)展,由于HEVC幾乎在各個(gè)模塊都添加或引進(jìn)了新的編碼技術(shù),所以它可以在保持視頻編碼質(zhì)量良好的情況下進(jìn)一步地提高視頻編碼效率。這些具有新的編碼技術(shù)的模塊的效率累加使得HEVC編碼性能有大幅度的提高。在相近的壓縮質(zhì)量的情況下,HEVC可以節(jié)省約50%的碼率,然而HEVC標(biāo)準(zhǔn)壓縮視頻的時(shí)候主要考慮的是時(shí)間冗余和空間冗余而忽略了大量的視覺冗余。本文通過融合時(shí)域和空域顯著性信息獲得最終的顯著度圖,并將其應(yīng)用在基于視覺的感知編碼。本文研究的工作內(nèi)容包括以下幾個(gè)方面:(1)提出了一種結(jié)合空域顯著性特征和時(shí)域顯著性特征為最終顯著度圖的方案,根據(jù)顯著度圖中每個(gè)像素點(diǎn)的灰度值計(jì)算得到每個(gè)最大編碼樹單元的顯著性權(quán)重值,然后根據(jù)顯著性權(quán)重值調(diào)節(jié)CTU層的量化參數(shù),使在顯著區(qū)域的CTU的量化參數(shù)(Quantization Parameter,QP)減小,失真更小而背景等非顯著區(qū)域CTU的QP相對(duì)應(yīng)的增加使得整幀在比特一定的情況下主觀質(zhì)量有所提高。本文采用顯著性加權(quán)峰值信噪比(Saliency ...
【文章來源】:南京郵電大學(xué)江蘇省
【文章頁數(shù)】:71 頁
【學(xué)位級(jí)別】:碩士
【部分圖文】:
HEVC幀內(nèi)角度預(yù)測(cè)模式
(a) 輸入圖像 (b) 空域顯著度圖 (c) 時(shí)域顯著度圖 (d) 最終的顯著度圖圖 3.3 空域顯著度圖、時(shí)域顯著度圖與最終空時(shí)結(jié)合的顯著度圖基于視頻顯著性的 QP 調(diào)整方法在本小節(jié),本章 3.1 小結(jié)所得的顯著度模型將被用于 CTU 層 QP 的調(diào)整。在視頻編碼標(biāo)準(zhǔn)中,量化雖然不可避免的帶來不可逆的失真,但是它可以在盡量不降低視頻視覺效果的條件下降低編碼所消耗的比特[54-55],量化參數(shù) QP 在量化以及反量化的過程中都決定著量化器的編碼壓縮率和圖像重建的質(zhì)量。在編碼器中,QP 能夠影響幀間編碼模式的選擇,當(dāng) QP 增大時(shí),采用 Skip 模式進(jìn)行編碼的編碼單元就會(huì)增多,運(yùn)動(dòng)矢量場(chǎng)會(huì)越來越稀疏,并且殘差系數(shù)為 0 的數(shù)目也越來越多,消耗的比特也會(huì)減少。目前也有很多基于顯著區(qū)域的 QP 調(diào)整的研究,Hadizadeh 等人[56]利用 IKN 顯著模型把視頻序列中的顯著區(qū)域提取出來,然后將視頻序列中當(dāng)前編碼幀分為兩部分:視覺感興趣區(qū)域和非視覺感興趣區(qū)域,最后調(diào)節(jié)這些區(qū)域的QP。雖然編碼性能有一定的提高,但是這種方案沒有考慮到視頻序列的時(shí)域信息。在 Yiming
(a) 輸入圖像 (b) 空時(shí)域融合顯著度圖圖 3.4 BasketballPass 序列第 43 幀上圖是 BasketballPass 序列第 43 幀的原圖和結(jié)合了時(shí)域和空域信息的顯著度圖,該序列的分辨率為 416×240,設(shè)置 CTU 的尺寸為 64×64,可以計(jì)算出一幀中 CTU 的數(shù)目為 28 個(gè)。紅色線框表示對(duì)圖像進(jìn)行了以 CTU 為單位的劃分,即上圖中每個(gè)方形代表一個(gè) CTU。根據(jù)原圖可以看出兩個(gè)人是圖片中的顯著區(qū)域,其余非顯著區(qū)域?yàn)楸尘皡^(qū)域,因此背景區(qū)域的CTU的 QP 應(yīng)設(shè)置較大來節(jié)省碼率,而包含人形的一些 CTU 的 QP 應(yīng)設(shè)置相對(duì)較小以使得顯著區(qū)域圖像細(xì)節(jié)信息更好的保存。本章在全 I 幀編碼模式下使用空域顯著度圖來指導(dǎo) CTU 層的 QP 調(diào)整,而在低延時(shí) P 幀編碼模式下使用有運(yùn)動(dòng)信息的空時(shí)結(jié)合顯著度圖。兩種編碼模式都是在不開啟碼率控制的情況下進(jìn)行編碼的,由于 CTU 是 Z 形掃描逐個(gè)進(jìn)行編碼,如果開啟碼率控制,則會(huì)存在 CTU相互之間的影響,例如:顯著性相同且都比較高的相鄰 CTU,前面的 CTU 根據(jù)顯著性權(quán)重值減小量化參數(shù)編碼完之后會(huì)使得當(dāng)前幀剩余比特減少,導(dǎo)致后面的 CTU 本身的 QP 值增大,
【參考文獻(xiàn)】:
期刊論文
[1]融合視覺感知特性的HDR視頻編碼率失真優(yōu)化算法[J]. 楊桐,郁梅,姜浩,蔣剛毅. 光電工程. 2018(01)
[2]面向HEVC的時(shí)空域感知量化[J]. 彭宗舉,鄒文輝,陳芬,費(fèi)馬燕. 西華師范大學(xué)學(xué)報(bào)(自然科學(xué)版). 2016(01)
[3]基于SSIM的HEVC幀內(nèi)編碼率失真優(yōu)化[J]. 朱天之,郁梅,蔣剛毅,陳芬,邵楓,彭宗舉. 光電子·激光. 2014(12)
[4]新一代視頻編碼標(biāo)準(zhǔn)——HEVC[J]. 朱秀昌,李欣,陳杰. 南京郵電大學(xué)學(xué)報(bào)(自然科學(xué)版). 2013(03)
[5]基于H.264感興趣區(qū)域平穩(wěn)視頻主觀質(zhì)量的碼率控制[J]. 路羊,李航,張陽,崔慧娟. 清華大學(xué)學(xué)報(bào)(自然科學(xué)版). 2009(01)
碩士論文
[1]基于視覺顯著性的HEVC編碼優(yōu)化技術(shù)研究[D]. 夏倩.南京郵電大學(xué) 2018
[2]HEVC框架下基于視覺顯著性的編碼優(yōu)化算法研究[D]. 李昌彬.西南交通大學(xué) 2016
本文編號(hào):3210939
【文章來源】:南京郵電大學(xué)江蘇省
【文章頁數(shù)】:71 頁
【學(xué)位級(jí)別】:碩士
【部分圖文】:
HEVC幀內(nèi)角度預(yù)測(cè)模式
(a) 輸入圖像 (b) 空域顯著度圖 (c) 時(shí)域顯著度圖 (d) 最終的顯著度圖圖 3.3 空域顯著度圖、時(shí)域顯著度圖與最終空時(shí)結(jié)合的顯著度圖基于視頻顯著性的 QP 調(diào)整方法在本小節(jié),本章 3.1 小結(jié)所得的顯著度模型將被用于 CTU 層 QP 的調(diào)整。在視頻編碼標(biāo)準(zhǔn)中,量化雖然不可避免的帶來不可逆的失真,但是它可以在盡量不降低視頻視覺效果的條件下降低編碼所消耗的比特[54-55],量化參數(shù) QP 在量化以及反量化的過程中都決定著量化器的編碼壓縮率和圖像重建的質(zhì)量。在編碼器中,QP 能夠影響幀間編碼模式的選擇,當(dāng) QP 增大時(shí),采用 Skip 模式進(jìn)行編碼的編碼單元就會(huì)增多,運(yùn)動(dòng)矢量場(chǎng)會(huì)越來越稀疏,并且殘差系數(shù)為 0 的數(shù)目也越來越多,消耗的比特也會(huì)減少。目前也有很多基于顯著區(qū)域的 QP 調(diào)整的研究,Hadizadeh 等人[56]利用 IKN 顯著模型把視頻序列中的顯著區(qū)域提取出來,然后將視頻序列中當(dāng)前編碼幀分為兩部分:視覺感興趣區(qū)域和非視覺感興趣區(qū)域,最后調(diào)節(jié)這些區(qū)域的QP。雖然編碼性能有一定的提高,但是這種方案沒有考慮到視頻序列的時(shí)域信息。在 Yiming
(a) 輸入圖像 (b) 空時(shí)域融合顯著度圖圖 3.4 BasketballPass 序列第 43 幀上圖是 BasketballPass 序列第 43 幀的原圖和結(jié)合了時(shí)域和空域信息的顯著度圖,該序列的分辨率為 416×240,設(shè)置 CTU 的尺寸為 64×64,可以計(jì)算出一幀中 CTU 的數(shù)目為 28 個(gè)。紅色線框表示對(duì)圖像進(jìn)行了以 CTU 為單位的劃分,即上圖中每個(gè)方形代表一個(gè) CTU。根據(jù)原圖可以看出兩個(gè)人是圖片中的顯著區(qū)域,其余非顯著區(qū)域?yàn)楸尘皡^(qū)域,因此背景區(qū)域的CTU的 QP 應(yīng)設(shè)置較大來節(jié)省碼率,而包含人形的一些 CTU 的 QP 應(yīng)設(shè)置相對(duì)較小以使得顯著區(qū)域圖像細(xì)節(jié)信息更好的保存。本章在全 I 幀編碼模式下使用空域顯著度圖來指導(dǎo) CTU 層的 QP 調(diào)整,而在低延時(shí) P 幀編碼模式下使用有運(yùn)動(dòng)信息的空時(shí)結(jié)合顯著度圖。兩種編碼模式都是在不開啟碼率控制的情況下進(jìn)行編碼的,由于 CTU 是 Z 形掃描逐個(gè)進(jìn)行編碼,如果開啟碼率控制,則會(huì)存在 CTU相互之間的影響,例如:顯著性相同且都比較高的相鄰 CTU,前面的 CTU 根據(jù)顯著性權(quán)重值減小量化參數(shù)編碼完之后會(huì)使得當(dāng)前幀剩余比特減少,導(dǎo)致后面的 CTU 本身的 QP 值增大,
【參考文獻(xiàn)】:
期刊論文
[1]融合視覺感知特性的HDR視頻編碼率失真優(yōu)化算法[J]. 楊桐,郁梅,姜浩,蔣剛毅. 光電工程. 2018(01)
[2]面向HEVC的時(shí)空域感知量化[J]. 彭宗舉,鄒文輝,陳芬,費(fèi)馬燕. 西華師范大學(xué)學(xué)報(bào)(自然科學(xué)版). 2016(01)
[3]基于SSIM的HEVC幀內(nèi)編碼率失真優(yōu)化[J]. 朱天之,郁梅,蔣剛毅,陳芬,邵楓,彭宗舉. 光電子·激光. 2014(12)
[4]新一代視頻編碼標(biāo)準(zhǔn)——HEVC[J]. 朱秀昌,李欣,陳杰. 南京郵電大學(xué)學(xué)報(bào)(自然科學(xué)版). 2013(03)
[5]基于H.264感興趣區(qū)域平穩(wěn)視頻主觀質(zhì)量的碼率控制[J]. 路羊,李航,張陽,崔慧娟. 清華大學(xué)學(xué)報(bào)(自然科學(xué)版). 2009(01)
碩士論文
[1]基于視覺顯著性的HEVC編碼優(yōu)化技術(shù)研究[D]. 夏倩.南京郵電大學(xué) 2018
[2]HEVC框架下基于視覺顯著性的編碼優(yōu)化算法研究[D]. 李昌彬.西南交通大學(xué) 2016
本文編號(hào):3210939
本文鏈接:http://sikaile.net/kejilunwen/xinxigongchenglunwen/3210939.html
最近更新
教材專著