基于“實體—描述—效用”模型的新聞視頻摘要技術(shù)研究
發(fā)布時間:2020-05-16 04:09
【摘要】:情報戰(zhàn)是打贏未來高技術(shù)局部戰(zhàn)爭的關(guān)鍵之一。視頻情報作為一種常見而重要的情報形式,越來越受到相關(guān)研究人員和決策者的關(guān)注。但是,視頻數(shù)據(jù)線性的、非結(jié)構(gòu)化的數(shù)據(jù)形式使得視頻瀏覽的效率非常低下。而應(yīng)用視頻摘要技術(shù)則可以縮減視頻的數(shù)據(jù)量,提高檢索效率,節(jié)省瀏覽時間,對基于視頻的情報分析以及視頻信息的檢索和管理都具有重要意義。 通過研究多種視頻摘要算法,本文總結(jié)了現(xiàn)有算法的一般流程,即“視頻切分—內(nèi)容提取—重要度評判—摘要合成”,并發(fā)現(xiàn)“缺乏一個一般性的指導(dǎo)模型,以及缺乏穩(wěn)定的中間信息載體”是現(xiàn)有算法的普遍缺陷。針對解決上述問題,本文圍繞著如何構(gòu)建了一個一般性的自動視頻摘要模型,以及如何基于此模型實現(xiàn)一個多層次的新聞視頻摘要系統(tǒng)這兩個方面來展開研究: 1、提出了用于視頻摘要的一般性的概念模型,即:“實體—描述—效用”模型,該模型把“實體”作為摘要的基本單元,通過對實體進(jìn)行描述,獲得實體的“效用”,以效用值為基本依據(jù)來生成摘要。 2、基于“實體—描述—效用”模型的思想,首先研究了實體切分技術(shù),然后,著重分析了由“實體”到“描述”的過程,設(shè)計并實現(xiàn)了一個實體描述體系,將其作為視頻內(nèi)容抽取結(jié)果的交流平臺。 3、構(gòu)造了基于描述的效用函數(shù),實現(xiàn)了由“描述”到“效用”的轉(zhuǎn)化。并以效用函數(shù)為基本依據(jù),設(shè)計了基于可變效用閾值的摘要方法,充分考慮用戶的不同偏好,分析了故事板和縮略視頻兩種形式的新聞故事摘要各自的生成策略。 4、分析了現(xiàn)有的新聞專題摘要形式和方法,提出了兩種新的可視化新聞專題摘要形式,并對基于這兩種摘要形式的新聞專題分析進(jìn)行了探討; 5、設(shè)計并實現(xiàn)了一個包含新聞故事摘要和新聞專題摘要的多層次的新聞視頻摘要系統(tǒng),實驗表明,該模型具有良好的靈活性和可擴(kuò)充性,用戶對摘要結(jié)果的滿意度較高。
【圖文】:
8(4.4)其中,爪I’‘』代表該鏡頭的人臉重要度,N代表鏡頭的總幀數(shù),A、表示第k幀中人臉白勺面積,搜。tI]*,表示幀的面積,,粵表示位置權(quán)重,其具體值女口圖4一1(b)藝所示。興3門24門25/12圖4一l人臉位置與權(quán)重如圖4一1(b),我們依據(jù)經(jīng)驗將一幅圖像垂直方向三等分,水平方向從上至下劃為3/12、4/12、5/12三份,并對分成的9塊分別賦以權(quán)值。9塊區(qū)域中,正中的一塊權(quán)值最高,因為這里一般是觀眾目光的焦點;其次是中部的左右兩塊,這里出現(xiàn)的人臉對觀眾的吸引力稍差,最后是上下和四角,一般重要的人物很少出現(xiàn)在這些角落。由上面的重要度公式可以看出,不/tl。。[0
同時尊重用戶的個性化需求,我們設(shè)計了一個系統(tǒng)預(yù)設(shè)與用戶調(diào)整相結(jié)合的個性化偏好獲取系統(tǒng)。如圖5一1所示是系統(tǒng)中的用戶偏好調(diào)節(jié)器。系統(tǒng)初始時對每個描述子賦予了一定的權(quán)值,而用戶可以依據(jù)自己的偏好進(jìn)行調(diào)整。圖5一l用戶偏好調(diào)節(jié)器第39頁
【學(xué)位授予單位】:國防科學(xué)技術(shù)大學(xué)
【學(xué)位級別】:碩士
【學(xué)位授予年份】:2003
【分類號】:E87
本文編號:2666151
【圖文】:
8(4.4)其中,爪I’‘』代表該鏡頭的人臉重要度,N代表鏡頭的總幀數(shù),A、表示第k幀中人臉白勺面積,搜。tI]*,表示幀的面積,,粵表示位置權(quán)重,其具體值女口圖4一1(b)藝所示。興3門24門25/12圖4一l人臉位置與權(quán)重如圖4一1(b),我們依據(jù)經(jīng)驗將一幅圖像垂直方向三等分,水平方向從上至下劃為3/12、4/12、5/12三份,并對分成的9塊分別賦以權(quán)值。9塊區(qū)域中,正中的一塊權(quán)值最高,因為這里一般是觀眾目光的焦點;其次是中部的左右兩塊,這里出現(xiàn)的人臉對觀眾的吸引力稍差,最后是上下和四角,一般重要的人物很少出現(xiàn)在這些角落。由上面的重要度公式可以看出,不/tl。。[0
同時尊重用戶的個性化需求,我們設(shè)計了一個系統(tǒng)預(yù)設(shè)與用戶調(diào)整相結(jié)合的個性化偏好獲取系統(tǒng)。如圖5一1所示是系統(tǒng)中的用戶偏好調(diào)節(jié)器。系統(tǒng)初始時對每個描述子賦予了一定的權(quán)值,而用戶可以依據(jù)自己的偏好進(jìn)行調(diào)整。圖5一l用戶偏好調(diào)節(jié)器第39頁
【學(xué)位授予單位】:國防科學(xué)技術(shù)大學(xué)
【學(xué)位級別】:碩士
【學(xué)位授予年份】:2003
【分類號】:E87
【引證文獻(xiàn)】
相關(guān)期刊論文 前1條
1 吳倩;史萍;;視頻摘要技術(shù)淺析[J];中國傳媒大學(xué)學(xué)報(自然科學(xué)版);2008年02期
本文編號:2666151
本文鏈接:http://sikaile.net/shekelunwen/renwuzj/2666151.html
最近更新
教材專著