基于維度最大熵數(shù)據(jù)流聚類的異常檢測方法
本文關鍵詞:基于維度最大熵數(shù)據(jù)流聚類的異常檢測方法
更多相關文章: 維度簇 最大熵原理 數(shù)據(jù)流 信息熵 異常檢測
【摘要】:針對傳統(tǒng)數(shù)據(jù)流聚類算法聚類信息損失大、不準確的缺點,提出一種基于維度最大熵的數(shù)據(jù)流聚類算法.采用動態(tài)數(shù)據(jù)直方圖將數(shù)據(jù)維度劃分為不同的維度組,計算各維度最大熵劃分維度空間簇,將相同維度簇的數(shù)據(jù)聚集成微簇,通過比較微簇的信息熵大小及其分布特點實現(xiàn)數(shù)據(jù)流的異常檢測.該方法提升了聚類速度,克服了傳統(tǒng)數(shù)據(jù)流聚類算法信息丟失的缺點.實驗結果表明,所提出算法能夠提高數(shù)據(jù)流異常檢測的準確性和有效性.
【作者單位】: 北京化工大學信息科學與技術學院;
【關鍵詞】: 維度簇 最大熵原理 數(shù)據(jù)流 信息熵 異常檢測
【基金】:國家自然科學基金項目(61374166) 教育部博士點基金項目(20120010110010) 中央高;究蒲袠I(yè)務費專項基金項目(YS1404)
【分類號】:TP311.13
【正文快照】: 0引言數(shù)據(jù)流聚類是近期數(shù)據(jù)挖掘領域研究的新熱點之一,它以實時、連續(xù)和有序的數(shù)據(jù)序列方式廣泛存在于各個應用領域.由于存在數(shù)據(jù)流量大、連續(xù)快速、不可預測和短暫易逝等特點[1],數(shù)據(jù)流聚類算法應該具有低內(nèi)存消耗、高計算效率和單遍掃描數(shù)據(jù)的特征.在數(shù)據(jù)流聚類和異常檢測方
【參考文獻】
中國期刊全文數(shù)據(jù)庫 前2條
1 胡_g;閆巧梅;;滑動窗口模型下的優(yōu)化數(shù)據(jù)流聚類算法[J];計算機應用;2008年06期
2 姜昱汐,李興斯;估計死亡率分布的一個最大熵模型[J];運籌與管理;2005年04期
【共引文獻】
中國期刊全文數(shù)據(jù)庫 前8條
1 李建東;王永茂;胡林敏;;最大熵原理及其應用[J];硅谷;2009年04期
2 許振佳;倪建成;;一種基于雙層架構的流數(shù)據(jù)聚類算法[J];電子技術;2015年03期
3 孫力娟;陳小東;韓崇;郭劍;;一種新的數(shù)據(jù)流模糊聚類方法[J];電子與信息學報;2015年07期
4 陳天偉;盧獻健;江海東;;應用最大熵方法改進克里金負權系數(shù)[J];桂林理工大學學報;2015年02期
5 范進;;基于熵理論的質量問題追溯[J];合肥工業(yè)大學學報(自然科學版);2007年02期
6 邢長征;張國凱;;基于自適應網(wǎng)格劃分的數(shù)據(jù)流聚類算法[J];計算機工程與科學;2011年10期
7 甄國涌;張蔚云;李圣昆;鄭永秋;;基于分離時序電路的邏輯設計關鍵技術研究[J];科學技術與工程;2014年05期
8 王治和;楊晏;;基于雙層網(wǎng)格和密度的數(shù)據(jù)流聚類算法[J];計算機工程;2014年04期
中國博士學位論文全文數(shù)據(jù)庫 前2條
1 曹振麗;面向養(yǎng)殖環(huán)境監(jiān)測的數(shù)據(jù)流處理方法研究[D];中國農(nóng)業(yè)大學;2015年
2 劉新春;大規(guī)模實時數(shù)據(jù)流連接關鍵技術的研究[D];中國科學技術大學;2015年
中國碩士學位論文全文數(shù)據(jù)庫 前3條
1 旺扎拉;特種車輛變速箱齒輪傳動失效分析[D];長春理工大學;2010年
2 常城;最大熵分布估計算法及其應用[D];太原科技大學;2013年
3 金銀平;三參數(shù)威布爾分布的可靠性研究[D];河南科技大學;2014年
【二級參考文獻】
中國期刊全文數(shù)據(jù)庫 前2條
1 金澈清,錢衛(wèi)寧,周傲英;流數(shù)據(jù)分析與管理綜述[J];軟件學報;2004年08期
2 常建龍;曹鋒;周傲英+;;基于滑動窗口的進化數(shù)據(jù)流聚類[J];軟件學報;2007年04期
中國碩士學位論文全文數(shù)據(jù)庫 前1條
1 周東濱;流數(shù)據(jù)聚類挖掘算法研究[D];吉林大學;2006年
【相似文獻】
中國期刊全文數(shù)據(jù)庫 前10條
1 王俊生;尹峰;李潛生;顧本立;;最大熵圖象重建在逆散射成象中的應用[J];信號處理;1992年03期
2 周兆經(jīng);;最大熵原理在情報檢索中的應用[J];情報學刊;1993年01期
3 丁豐,袁保宗;一種基于最大熵原理的漢語實體提取方法[J];鐵道學報;2001年05期
4 徐煥良,李緒蓉;一種基于最大熵的構件庫動態(tài)存儲方法[J];科技廣場;2005年08期
5 徐智;;基于最大熵原理的貝葉斯法在測量數(shù)據(jù)分析中的應用[J];內(nèi)蒙古農(nóng)業(yè)大學學報(自然科學版);2013年01期
6 譚高山;張麗艷;;基于最大熵原理的復雜曲面位姿配準技術[J];農(nóng)業(yè)機械學報;2014年07期
7 馮尚友;;信息熵與最大熵原理[J];水利電力科技;1995年03期
8 代志華;付曉東;黃袁;賈楠;;基于最大熵原理的Web服務QoS概率分布獲取[J];計算機應用;2012年10期
9 姜群;王越;歐陽;;構建在最大熵原理上的分布估計算法及其應用研究[J];小型微型計算機系統(tǒng);2007年12期
10 鄭錦超;王如彬;張志康;;神經(jīng)能量與神經(jīng)信息之間內(nèi)在動力學關系初探[J];力學學報;2012年05期
中國博士學位論文全文數(shù)據(jù)庫 前2條
1 劉偉;基于最大熵分布的海洋平臺環(huán)境條件聯(lián)合重現(xiàn)值推算[D];中國海洋大學;2011年
2 晁國清;監(jiān)督與半監(jiān)督多視角最大熵判別的研究[D];華東師范大學;2015年
中國碩士學位論文全文數(shù)據(jù)庫 前5條
1 張洪恩;最大熵原理在博弈實驗中的檢驗:兩個實例[D];浙江大學;2012年
2 李憲東;基于最大熵原理的確定概率分布的方法研究[D];華北電力大學(北京);2008年
3 程亮;最大熵原理與最小熵方法在測量數(shù)據(jù)處理中的應用[D];電子科技大學;2008年
4 肖可以;最大熵原理在水文頻率分布模型中的應用研究[D];西北農(nóng)林科技大學;2010年
5 鄒春霞;基于最大熵原理的水工建筑物可靠性分析[D];內(nèi)蒙古農(nóng)業(yè)大學;2004年
,本文編號:518045
本文鏈接:http://sikaile.net/kejilunwen/ruanjiangongchenglunwen/518045.html