本文關(guān)鍵詞：基于維度最大熵?cái)?shù)據(jù)流聚類的異常檢測方法

  更多相關(guān)文章： 維度簇 最大熵原理 數(shù)據(jù)流 信息熵 異常檢測

【摘要】：針對傳統(tǒng)數(shù)據(jù)流聚類算法聚類信息損失大、不準(zhǔn)確的缺點(diǎn),提出一種基于維度最大熵的數(shù)據(jù)流聚類算法.采用動態(tài)數(shù)據(jù)直方圖將數(shù)據(jù)維度劃分為不同的維度組,計(jì)算各維度最大熵劃分維度空間簇,將相同維度簇的數(shù)據(jù)聚集成微簇,通過比較微簇的信息熵大小及其分布特點(diǎn)實(shí)現(xiàn)數(shù)據(jù)流的異常檢測.該方法提升了聚類速度,克服了傳統(tǒng)數(shù)據(jù)流聚類算法信息丟失的缺點(diǎn).實(shí)驗(yàn)結(jié)果表明,所提出算法能夠提高數(shù)據(jù)流異常檢測的準(zhǔn)確性和有效性.
【作者單位】： 北京化工大學(xué)信息科學(xué)與技術(shù)學(xué)院;
【關(guān)鍵詞】： 維度簇 最大熵原理 數(shù)據(jù)流 信息熵 異常檢測
【基金】：國家自然科學(xué)基金項(xiàng)目(61374166) 教育部博士點(diǎn)基金項(xiàng)目(20120010110010) 中央高�；究蒲袠I(yè)務(wù)費(fèi)專項(xiàng)基金項(xiàng)目(YS1404)
【分類號】：TP311.13
【正文快照】： 0引言數(shù)據(jù)流聚類是近期數(shù)據(jù)挖掘領(lǐng)域研究的新熱點(diǎn)之一,它以實(shí)時、連續(xù)和有序的數(shù)據(jù)序列方式廣泛存在于各個應(yīng)用領(lǐng)域.由于存在數(shù)據(jù)流量大、連續(xù)快速、不可預(yù)測和短暫易逝等特點(diǎn)[1],數(shù)據(jù)流聚類算法應(yīng)該具有低內(nèi)存消耗、高計(jì)算效率和單遍掃描數(shù)據(jù)的特征.在數(shù)據(jù)流聚類和異常檢測方

【參考文獻(xiàn)】

中國期刊全文數(shù)據(jù)庫 前2條

1 胡_g;閆巧梅;;滑動窗口模型下的優(yōu)化數(shù)據(jù)流聚類算法[J];計(jì)算機(jī)應(yīng)用;2008年06期

2 姜昱汐,李興斯;估計(jì)死亡率分布的一個最大熵模型[J];運(yùn)籌與管理;2005年04期

【共引文獻(xiàn)】

中國期刊全文數(shù)據(jù)庫 前8條

1 李建東;王永茂;胡林敏;;最大熵原理及其應(yīng)用[J];硅谷;2009年04期

2 許振佳;倪建成;;一種基于雙層架構(gòu)的流數(shù)據(jù)聚類算法[J];電子技術(shù);2015年03期

3 孫力娟;陳小東;韓崇;郭劍;;一種新的數(shù)據(jù)流模糊聚類方法[J];電子與信息學(xué)報(bào);2015年07期

4 陳天偉;盧獻(xiàn)健;江海東;;應(yīng)用最大熵方法改進(jìn)克里金負(fù)權(quán)系數(shù)[J];桂林理工大學(xué)學(xué)報(bào);2015年02期

5 范進(jìn);;基于熵理論的質(zhì)量問題追溯[J];合肥工業(yè)大學(xué)學(xué)報(bào)(自然科學(xué)版);2007年02期

6 邢長征;張國凱;;基于自適應(yīng)網(wǎng)格劃分的數(shù)據(jù)流聚類算法[J];計(jì)算機(jī)工程與科學(xué);2011年10期

7 甄國涌;張蔚云;李圣昆;鄭永秋;;基于分離時序電路的邏輯設(shè)計(jì)關(guān)鍵技術(shù)研究[J];科學(xué)技術(shù)與工程;2014年05期

8 王治和;楊晏;;基于雙層網(wǎng)格和密度的數(shù)據(jù)流聚類算法[J];計(jì)算機(jī)工程;2014年04期

中國博士學(xué)位論文全文數(shù)據(jù)庫 前2條

1 曹振麗;面向養(yǎng)殖環(huán)境監(jiān)測的數(shù)據(jù)流處理方法研究[D];中國農(nóng)業(yè)大學(xué);2015年

2 劉新春;大規(guī)模實(shí)時數(shù)據(jù)流連接關(guān)鍵技術(shù)的研究[D];中國科學(xué)技術(shù)大學(xué);2015年

中國碩士學(xué)位論文全文數(shù)據(jù)庫 前3條

1 旺扎拉;特種車輛變速箱齒輪傳動失效分析[D];長春理工大學(xué);2010年

2 常城;最大熵分布估計(jì)算法及其應(yīng)用[D];太原科技大學(xué);2013年

3 金銀平;三參數(shù)威布爾分布的可靠性研究[D];河南科技大學(xué);2014年

【二級參考文獻(xiàn)】

中國期刊全文數(shù)據(jù)庫 前2條

1 金澈清,錢衛(wèi)寧,周傲英;流數(shù)據(jù)分析與管理綜述[J];軟件學(xué)報(bào);2004年08期

2 常建龍;曹鋒;周傲英+;;基于滑動窗口的進(jìn)化數(shù)據(jù)流聚類[J];軟件學(xué)報(bào);2007年04期

中國碩士學(xué)位論文全文數(shù)據(jù)庫 前1條

1 周東濱;流數(shù)據(jù)聚類挖掘算法研究[D];吉林大學(xué);2006年

【相似文獻(xiàn)】

中國期刊全文數(shù)據(jù)庫 前10條

1 王俊生;尹峰;李潛生;顧本立;;最大熵圖象重建在逆散射成象中的應(yīng)用[J];信號處理;1992年03期

2 周兆經(jīng);;最大熵原理在情報(bào)檢索中的應(yīng)用[J];情報(bào)學(xué)刊;1993年01期

3 丁豐,袁保宗;一種基于最大熵原理的漢語實(shí)體提取方法[J];鐵道學(xué)報(bào);2001年05期

4 徐煥良,李緒蓉;一種基于最大熵的構(gòu)件庫動態(tài)存儲方法[J];科技廣場;2005年08期

5 徐智;;基于最大熵原理的貝葉斯法在測量數(shù)據(jù)分析中的應(yīng)用[J];內(nèi)蒙古農(nóng)業(yè)大學(xué)學(xué)報(bào)(自然科學(xué)版);2013年01期

6 譚高山;張麗艷;;基于最大熵原理的復(fù)雜曲面位姿配準(zhǔn)技術(shù)[J];農(nóng)業(yè)機(jī)械學(xué)報(bào);2014年07期

7 馮尚友;;信息熵與最大熵原理[J];水利電力科技;1995年03期

8 代志華;付曉東;黃袁;賈楠;;基于最大熵原理的Web服務(wù)QoS概率分布獲取[J];計(jì)算機(jī)應(yīng)用;2012年10期

9 姜群;王越;歐陽;;構(gòu)建在最大熵原理上的分布估計(jì)算法及其應(yīng)用研究[J];小型微型計(jì)算機(jī)系統(tǒng);2007年12期

10 鄭錦超;王如彬;張志康;;神經(jīng)能量與神經(jīng)信息之間內(nèi)在動力學(xué)關(guān)系初探[J];力學(xué)學(xué)報(bào);2012年05期

中國博士學(xué)位論文全文數(shù)據(jù)庫 前2條

1 劉偉;基于最大熵分布的海洋平臺環(huán)境條件聯(lián)合重現(xiàn)值推算[D];中國海洋大學(xué);2011年

2 晁國清;監(jiān)督與半監(jiān)督多視角最大熵判別的研究[D];華東師范大學(xué);2015年

中國碩士學(xué)位論文全文數(shù)據(jù)庫 前5條

1 張洪恩;最大熵原理在博弈實(shí)驗(yàn)中的檢驗(yàn)：兩個實(shí)例[D];浙江大學(xué);2012年

2 李憲東;基于最大熵原理的確定概率分布的方法研究[D];華北電力大學(xué)（北京）;2008年

3 程亮;最大熵原理與最小熵方法在測量數(shù)據(jù)處理中的應(yīng)用[D];電子科技大學(xué);2008年

4 肖可以;最大熵原理在水文頻率分布模型中的應(yīng)用研究[D];西北農(nóng)林科技大學(xué);2010年

5 鄒春霞;基于最大熵原理的水工建筑物可靠性分析[D];內(nèi)蒙古農(nóng)業(yè)大學(xué);2004年

，

本文編號：518045