視覺感知特性指導(dǎo)下的自然圖像摳圖算法研究
發(fā)布時(shí)間:2017-08-17 15:11
本文關(guān)鍵詞:視覺感知特性指導(dǎo)下的自然圖像摳圖算法研究
【摘要】:摳圖(matting)是圖像處理的一項(xiàng)重要技術(shù),其目標(biāo)是以遮罩形式提取出靜態(tài)圖像或動(dòng)態(tài)視頻中任意形狀的前景物體,以方便將提取出來的前景物體合成到全新場景中,得到新的合成圖像或視頻。摳圖成為圖像處理的研究熱點(diǎn),吸引人們的關(guān)注,這主要有兩方面的原因。一方面,摳圖涉及到計(jì)算機(jī)視覺和機(jī)器學(xué)習(xí)的融合,為圖像編輯提供基礎(chǔ),在工業(yè)設(shè)計(jì)和家庭娛樂等方面,有極其廣泛的應(yīng)用,具有巨大的商業(yè)價(jià)值。另一方面,提取任意形狀的前景也是圖形學(xué)和計(jì)算機(jī)視覺中非常具有挑戰(zhàn)性的一個(gè)部分,目標(biāo)形狀的復(fù)雜細(xì)節(jié)、透明通道的處理、遮擋和光照改變、背景相似物的干擾等因素都使得該問題異常復(fù)雜。盡管經(jīng)過幾十年的研究,不同研究者提出了很多摳圖算法,然而如何實(shí)現(xiàn)復(fù)雜環(huán)境下的魯棒和精確地前景提取依然需要深入研究,這使得摳圖具有較大的理論研究價(jià)值。本文深入分析現(xiàn)有摳圖技術(shù)存在的問題,重點(diǎn)研究人類視覺感知特性指導(dǎo)下的自然圖像摳圖算法及其他若干問題。 本文面向圖像特效制作和家庭休閑娛樂等應(yīng)用領(lǐng)域,將神經(jīng)生物學(xué)和認(rèn)知心理學(xué)中關(guān)于人類感知特性的研究成果應(yīng)用到摳圖算法中,嘗試從這一角度出發(fā),對自然圖像摳圖問題進(jìn)行研究,使其在盡可能減少用戶交互量的同時(shí),獲得高質(zhì)量的摳圖結(jié)果。本文在如下四個(gè)方面進(jìn)行了研究和探索。一、從優(yōu)化用戶輸入出發(fā),考察視覺特性對摳圖算法的影響,結(jié)合視覺注意模型,研究更為便捷的交互方式,減少用戶的交互工作量:二、研究基于自然圖像結(jié)構(gòu)特征的三分圖修正方法,降低算法對用戶輸入的依賴程度;對貝葉斯摳圖算法進(jìn)行改進(jìn),提高其對復(fù)雜圖像的處理能力:三、探索以全局視覺顯著性為參考的顏色樣本采集方法,提高基于顏色采樣的魯棒摳圖算法的準(zhǔn)確性;四、研究基于結(jié)構(gòu)特征的局部自然圖像摳圖算法,用以對摳圖算法結(jié)果做局部修正,提高算法最終的遮罩效果。與已有方法不同,本文算法強(qiáng)調(diào)通過人類感知特性挖掘圖像中前景目標(biāo)的潛在信息,充分利用自然圖像的視覺特性,在降低算法對用戶交互的過度依賴的同時(shí),提高算法的準(zhǔn)確性。 基于上述目標(biāo),本文的主要?jiǎng)?chuàng)新點(diǎn)如下: 第一,針對包含單一前景目標(biāo)的自然圖像,提出了一種基于人類視覺注意模型的半自動(dòng)摳圖算法。單一前景圖像摳圖中所提的前景物體對應(yīng)的正是注意模型中的感興趣物體,本文提出了一種以注意焦點(diǎn)作為問題先驗(yàn)的摳圖方法,嘗試將注意模型合理的引入摳圖問題中。提出包含先驗(yàn)指導(dǎo)信息的視覺注意模型,將注意焦點(diǎn)轉(zhuǎn)移范圍控制在感興趣目標(biāo)區(qū)域內(nèi)。利用注意焦點(diǎn)序列作為圖像的前景約束,能夠最大限度的提供前景先驗(yàn),同時(shí)避免了用戶交互的無目的性。之后采用閉型優(yōu)化算法求解遮罩,能夠得到較高的摳圖質(zhì)量,實(shí)驗(yàn)結(jié)果表明該算法適用于前景物體唯一且連通的自然圖像。 第二,研究利用圖像局部統(tǒng)計(jì)特性的摳圖算法。大部分摳圖算法能夠取得良好效果的前提條件是用戶輸入三分圖的精確性,然而,獲取精確的三分圖需要消耗大量的人力。針對三分圖未知區(qū)域過大,已知信息不充分這種情況,本文提出了一種三分圖修正算法,克服之前算法不能對圖像結(jié)構(gòu)信息建模的局限性,也降低了摳圖算法對三分圖精確性的要求。通過統(tǒng)計(jì)信息將未知區(qū)域中的若干點(diǎn)預(yù)先標(biāo)注為確定前景和背景,對輸入三分圖進(jìn)行修正,從而為摳圖算法提供更為充分的樣本。傳統(tǒng)貝葉斯摳圖是一種基于統(tǒng)計(jì)學(xué)習(xí)的方法,用有向高斯混合模型表示待求解區(qū)域周圍的采樣信息,傳統(tǒng)貝葉斯摳圖算法對每個(gè)像素點(diǎn)分別求解,得到的遮罩是離散的。本文根據(jù)透明度值的統(tǒng)計(jì)特性對原最大似然函數(shù)進(jìn)行了改進(jìn),實(shí)驗(yàn)證明改進(jìn)算法能夠消除遮罩的不連續(xù)性。本算法適用于難以人工劃分出精確三分圖的自然圖像。 第三,研究基于視覺顯著性的樣本采集方法及基于可信度的摳圖算法。提出了一種改進(jìn)的魯棒摳圖算法,結(jié)合基于顏色采樣的摳圖算法和基于信任傳播的摳圖算法的優(yōu)點(diǎn),同時(shí)克服以往采樣過程中沿區(qū)域邊緣均勻采樣的做法,重點(diǎn)采集顯著樣本點(diǎn),從而最大限度的保證樣本對的完整性。而后計(jì)算樣本點(diǎn)的可信度,將線性假設(shè)、顏色空間距離、局部顯著性等作為評判依據(jù),選擇具有高可信度的樣本點(diǎn)來估計(jì)遮罩值,最后使用隨機(jī)游走算法優(yōu)化估計(jì)值。實(shí)驗(yàn)表明,該采樣方法能夠比以往采樣算法得到更完整的樣本對,提高了摳圖算法的遮罩結(jié)果。 第四,研究基于結(jié)構(gòu)特征的局部修正摳圖算法。提出了一種局部摳圖算法,在用戶給出先驗(yàn)信息后,首先通過核嶺回歸方法得到局部圖像的顏色-透明度模型,之后的學(xué)習(xí)過程加入了根據(jù)圖像塊顏色和紋理特征得到的自適應(yīng)系數(shù),來調(diào)整目標(biāo)函數(shù)中數(shù)據(jù)項(xiàng)和光滑項(xiàng)的權(quán)重。因?yàn)閺膱D像本身的特征來看,在高對比度區(qū)域,目標(biāo)函數(shù)中的數(shù)據(jù)項(xiàng)應(yīng)該扮演更加重要的角色。本算法可用于對已有算法的摳圖結(jié)果進(jìn)行局部修正。實(shí)驗(yàn)結(jié)果顯示,這種自適應(yīng)的局部修正算法能夠得到正確、魯棒的結(jié)果。
【關(guān)鍵詞】:圖像摳圖 視覺顯著性 前景提取
【學(xué)位授予單位】:北京交通大學(xué)
【學(xué)位級別】:博士
【學(xué)位授予年份】:2015
【分類號】:TP391.41
【目錄】:
- 致謝5-6
- 摘要6-8
- ABSTRACT8-11
- 目錄11-14
- 1 緒論14-28
- 1.1 問題描述15-21
- 1.2 研究意義21-23
- 1.3 研究現(xiàn)狀23-25
- 1.3.1 單一背景的圖像摳圖技術(shù)(藍(lán)屏摳圖)23-25
- 1.3.2 自然圖像摳圖技術(shù)25
- 1.4 本文的研究內(nèi)容25-27
- 1.5 本文的章節(jié)安排27
- 1.6 小結(jié)27-28
- 2 自然圖像摳圖算法綜述28-44
- 2.1 用戶交互方式28-31
- 2.1.1 三分圖29-30
- 2.1.2 指定線條作為先驗(yàn)30-31
- 2.2 常見摳圖算法31-43
- 2.2.1 基于顏色采樣的摳圖算法31-37
- 2.2.2 基于信任傳播的摳圖算法37-43
- 2.3 小結(jié)43-44
- 3 基于視覺注意機(jī)制的圖像摳圖算法44-66
- 3.1 引言44-45
- 3.2 相關(guān)工作45-53
- 3.2.1 常見摳圖算法的交互方式45-47
- 3.2.2 視覺注意模型47-51
- 3.2.3 基于視覺感知特性的摳圖算法51-53
- 3.3 基于視覺注意模型的摳圖算法53-61
- 3.3.1 視覺注意控制模塊53-60
- 3.3.2 摳圖模塊60-61
- 3.4 實(shí)驗(yàn)結(jié)果與分析61-65
- 3.5 本章小結(jié)65-66
- 4 結(jié)合三分圖修正的改進(jìn)貝葉斯摳圖算法66-90
- 4.1 引言66-68
- 4.2 相關(guān)工作68-72
- 4.3 結(jié)合三分圖修正的改進(jìn)貝葉斯摳圖算法72-82
- 4.3.1 三分圖修正算法74-76
- 4.3.2 改進(jìn)的貝葉斯摳圖算法76-82
- 4.4 實(shí)驗(yàn)結(jié)果與分析82-88
- 4.4.1 定性比較82-87
- 4.4.2 定量比較87-88
- 4.5 結(jié)論88-90
- 5 基于視覺顯著性信息的魯棒摳圖算法90-108
- 5.1 引言90-91
- 5.2 相關(guān)工作91-95
- 5.2.1 最近鄰采樣法91-94
- 5.2.2 優(yōu)化采樣法94-95
- 5.3 顯著信息計(jì)算方法95-97
- 5.4 基于顯著信息采樣的魯棒摳圖算法97-103
- 5.4.1 選擇候選樣本點(diǎn)98-99
- 5.4.2 選擇待用樣本99-101
- 5.4.3 透明度值估計(jì)方法101-103
- 5.5 實(shí)驗(yàn)結(jié)果與分析103-107
- 5.5.1 定性比較104-105
- 5.5.2 定量比較105-107
- 5.6 小結(jié)107-108
- 6 基于圖像結(jié)構(gòu)特征的局部修正摳圖算法108-124
- 6.1 引言108-109
- 6.2 相關(guān)工作109-112
- 6.3 基于半監(jiān)督學(xué)習(xí)的透明度值估計(jì)方法112-120
- 6.3.1 透明度值估計(jì)方法114-115
- 6.3.2 局部學(xué)習(xí)算法115-120
- 6.4 實(shí)驗(yàn)120-122
- 6.5 小結(jié)122-124
- 7 總結(jié)與展望124-126
- 7.1 全文工作總結(jié)124-125
- 7.2 進(jìn)一步研究設(shè)想125-126
- 參考文獻(xiàn)126-134
- 作者簡歷134-138
- 學(xué)位論文數(shù)據(jù)集138
【參考文獻(xiàn)】
中國期刊全文數(shù)據(jù)庫 前3條
1 林生佑,石教英;基于感知顏色空間的自然圖像摳圖[J];計(jì)算機(jī)輔助設(shè)計(jì)與圖形學(xué)學(xué)報(bào);2005年05期
2 林生佑;潘瑞芳;杜輝;石教英;;數(shù)字摳圖技術(shù)綜述[J];計(jì)算機(jī)輔助設(shè)計(jì)與圖形學(xué)學(xué)報(bào);2007年04期
3 張鵬,王潤生;基于視點(diǎn)轉(zhuǎn)移和視區(qū)追蹤的圖像顯著區(qū)域檢測[J];軟件學(xué)報(bào);2004年06期
中國博士學(xué)位論文全文數(shù)據(jù)庫 前2條
1 鐘晶晶;全局顯著信息指導(dǎo)下的輪廓編組計(jì)算模型研究[D];北京交通大學(xué);2010年
2 姚桂林;數(shù)字圖像摳圖關(guān)鍵技術(shù)研究[D];哈爾濱工業(yè)大學(xué);2013年
,本文編號:689660
本文鏈接:http://sikaile.net/shoufeilunwen/xxkjbs/689660.html
最近更新
教材專著