作為一種常見的表達(dá)方式,手繪草圖在人類生活中發(fā)揮著十分重要的作用,可以方便地用于描繪物體、勾勒故事情節(jié)、設(shè)計建筑等。手繪草圖所具有的抽象表現(xiàn)力和靈活性使其能夠很好地與圖像檢索、場景生成等實際應(yīng)用相結(jié)合,導(dǎo)致對于手繪草圖的處理和理解的實際需求日益增加。但是,當(dāng)前圖像理解領(lǐng)域的工作主要針對的是真實圖像數(shù)據(jù),而面向手繪草圖的研究相對較少。相比于真實圖像,手繪草圖僅包含若干簡要線條,沒有顏色和紋理等信息,且數(shù)據(jù)十分匱乏。此外,由于人類個體繪畫技巧等主觀因素的影響,手繪草圖在形象程度、外觀和細(xì)節(jié)等方面都表現(xiàn)出了非常大的差異,這使得面向手繪草圖的語義理解成為一個極具挑戰(zhàn)性的任務(wù)。如何將計算機自動化技術(shù)與手繪草圖結(jié)合起來,實現(xiàn)對手繪草圖數(shù)據(jù)的深層理解和高效挖掘,以提高創(chuàng)作者或設(shè)計人員的工作效率,滿足用戶多樣化的應(yīng)用需求,是一個非常有價值和具有挑戰(zhàn)性的研究課題。手繪草圖的語義理解研究主要面臨著兩方面的挑戰(zhàn):一是底層特征與高層語義及真實圖像和手繪草圖之間存在的語義鴻溝,二是手繪草圖數(shù)據(jù)匱乏及類內(nèi)差異過大。此外,現(xiàn)有方法還未充分考慮手繪草圖的表達(dá)能力與視頻語義理解的關(guān)聯(lián)性。針對手繪草圖語義理解中存在的上述...

【文章頁數(shù)】：137 頁

【學(xué)位級別】：博士

【文章目錄】：
摘要
ABSTRACT
第1章 緒論
    1.1 手繪草圖語義理解的研究背景及意義
        1.1.1 研究背景
        1.1.2 研究意義
    1.2 手繪草圖語義理解的研究現(xiàn)狀與分析
        1.2.1 手繪草圖的識別與分割
        1.2.2 基于手繪草圖的檢索
        1.2.3 真實圖像與手繪草圖的相互轉(zhuǎn)換
        1.2.4 具有代表性的手繪草圖數(shù)據(jù)集
    1.3 現(xiàn)有方法存在的主要問題及可能的解決方案
    1.4 本文的主要研究內(nèi)容與組織結(jié)構(gòu)
        1.4.1 本文的研究內(nèi)容
        1.4.2 本文的組織結(jié)構(gòu)
第2章 面向手繪草圖的有判別力圖像塊挖掘
    2.1 引言
    2.2 相關(guān)工作
    2.3 手繪草圖中有判別力圖像塊的挖掘
        2.3.1 圖像塊采樣及特征表示
        2.3.2 有判別力圖像塊的自動挖掘
    2.4 實驗結(jié)果與分析
        2.4.1 手繪草圖中有判別力的圖像塊
        2.4.2 代表性手繪草圖的比較
        2.4.3 手繪草圖的識別
        2.4.4 討論與分析
    2.5 本章小結(jié)
第3章 基于CNN的手繪草圖部件級語義解析
    3.1 引言
    3.2 相關(guān)工作
        3.2.1 真實圖像的語義解析
        3.2.2 手繪草圖的語義解析
        3.2.3 域適應(yīng)的方法
    3.3 基于深度學(xué)習(xí)的部件級草圖解析
        3.3.1 基于同質(zhì)轉(zhuǎn)換的跨域自適應(yīng)方法
        3.3.2 基于軟加權(quán)的交叉熵?fù)p失函數(shù)
        3.3.3 類間信息共享的階段學(xué)習(xí)策略
    3.4 實驗結(jié)果與分析
        3.4.1 數(shù)據(jù)集及實驗設(shè)置
        3.4.2 實驗結(jié)果與討論
        3.4.3 與現(xiàn)有方法的比較
        3.4.4 針對SBIR的進一步應(yīng)用
        3.4.5 定性結(jié)果及分析
    3.5 本章小結(jié)
第4章 融合Bezier形變和均線重構(gòu)的數(shù)據(jù)增強學(xué)習(xí)法及手繪草圖識別
    4.1 引言
    4.2 相關(guān)工作
        4.2.1 手繪草圖的識別
        4.2.2 數(shù)據(jù)增強方法
    4.3 基于手繪草圖特定數(shù)據(jù)增強的學(xué)習(xí)方法
        4.3.1 基于Bezier控制點草圖形變的建模方法
        4.3.2 針對類內(nèi)差異的均線重構(gòu)方法
    4.4 實驗結(jié)果與分析
        4.4.1 數(shù)據(jù)集及實驗設(shè)置
        4.4.2 消融研究
        4.4.3 與現(xiàn)有方法的比較
        4.4.4 在Sketchy-R數(shù)據(jù)集上的分類結(jié)果
        4.4.5 針對SBIR的進一步應(yīng)用
        4.4.6 定性結(jié)果
        4.4.7 討論
    4.5 本章小結(jié)
第5章 動作草圖時空表達(dá)法及動作類視頻語義匹配
    5.1 引言
    5.2 相關(guān)工作
    5.3 基于動作草圖時空表達(dá)法的人類動作識別
        5.3.1 動作的草圖化
        5.3.2 有判別力動作草圖的挖掘
        5.3.3 基于草圖池化的動作表示
    5.4 實驗結(jié)果與分析
        5.4.1 數(shù)據(jù)集
        5.4.2 實驗設(shè)置
        5.4.3 有判別力的動作草圖的實驗結(jié)果
        5.4.4 不同池化方法的比較
        5.4.5 動作識別的結(jié)果
        5.4.6 時間開銷
    5.5 本章小結(jié)
結(jié)論
參考文獻
攻讀博士學(xué)位期間發(fā)表的論文及其他成果
致謝
個人簡歷



本文編號：3747964