智能電網(wǎng)大數(shù)據(jù)流式處理方法與狀態(tài)監(jiān)測異常檢測
本文選題:智能電網(wǎng) + 大數(shù)據(jù); 參考:《電力系統(tǒng)自動化》2016年14期
【摘要】:針對智能電網(wǎng)大數(shù)據(jù)流的實時性、易失性、無序性等特點,提出智能電網(wǎng)大數(shù)據(jù)的實時流處理框架,實現(xiàn)數(shù)據(jù)收集、數(shù)據(jù)緩沖與流式計算,滿足狀態(tài)監(jiān)測異常檢測與用電數(shù)據(jù)分析等快速處理需要。通過采集系統(tǒng)節(jié)點監(jiān)聽數(shù)據(jù)源變化并實時收集數(shù)據(jù),利用消息訂閱模式對數(shù)據(jù)進行緩沖,解決數(shù)據(jù)采集與流式計算速度不一致的問題。提出一種基于Storm的狀態(tài)監(jiān)測數(shù)據(jù)流滑動窗口處理方法,在規(guī)定時間內(nèi)分批處理狀態(tài)監(jiān)測數(shù)據(jù)流,保證數(shù)據(jù)的連續(xù)計算,通過閾值判斷進行異常檢測。實驗結(jié)果表明,在集群規(guī)模一定的條件下,適當(dāng)?shù)馗淖児ぷ鬟M程數(shù)以及執(zhí)行器線程的并發(fā)數(shù)設(shè)置,可以增大滑動窗口的元件吞吐量,提高狀態(tài)監(jiān)測異常檢測的實時處理效率。
[Abstract]:In view of the characteristics of real time, vulnerability and disorder of large data flow in smart grid, a real-time flow processing framework for smart grid large data is proposed, which realizes data collection, data buffer and flow calculation. It meets the needs of rapid processing of state monitoring anomaly detection and electrical data analysis. The data source changes and real-time is monitored through the collection system nodes. Collecting data, using message subscription model to buffer data to solve the problem that data collection is not consistent with flow computing speed. A sliding window processing method based on Storm for state monitoring data flow is proposed. In the specified time, the data flow is monitored in batch, continuous calculation of data is guaranteed, and the anomaly is judged by threshold. The test results show that, under the condition of a certain cluster scale, properly changing the number of work processes and the setting of the concurrent number of the actuator threads can increase the throughput of the element in the sliding window and improve the real-time processing efficiency of the state monitoring anomaly detection.
【作者單位】: 華北電力大學(xué)控制與計算機工程學(xué)院;
【基金】:國家自然科學(xué)基金資助項目(61074078)~~
【分類號】:TM76
【相似文獻】
相關(guān)期刊論文 前10條
1 ;美國政府正式啟動智能電網(wǎng)項目[J];電氣技術(shù);2009年06期
2 ;澳大利亞斥資1億澳元建造智能電網(wǎng)[J];華東電力;2009年06期
3 ;關(guān)于建成統(tǒng)一的“堅強智能電網(wǎng)” 華東電網(wǎng)有限公司董事長、黨組書記帥軍慶6月1 6日接受東方早報記者獨家采訪[J];華東電力;2009年06期
4 張征容;;智能電網(wǎng)淺述[J];云南電力技術(shù);2009年03期
5 方廷;白丹;;智能電網(wǎng)特點及發(fā)展趨勢[J];云南電業(yè);2009年07期
6 ;國外智能電網(wǎng)研究與應(yīng)用[J];國家電網(wǎng);2009年06期
7 ;第一屆智能電網(wǎng)研究學(xué)術(shù)論壇召開[J];供用電;2009年04期
8 苗新;張逸飛;劉津;;智能電網(wǎng)的中國之路[J];國家電網(wǎng);2009年07期
9 ;中國科學(xué)院電工研究所“智能電網(wǎng)研究中心”成立[J];電氣技術(shù);2009年09期
10 韓曉平;;我們?yōu)槭裁葱枰悄茈娋W(wǎng)[J];大眾用電;2009年10期
相關(guān)會議論文 前10條
1 王益民;;堅強智能電網(wǎng)的探索與實踐[A];2010年電力系統(tǒng)自動化學(xué)術(shù)研討會論文集[C];2010年
2 盧強;何光宇;;智能電網(wǎng)及其工程實現(xiàn)[A];2010年電力系統(tǒng)自動化學(xué)術(shù)研討會論文集[C];2010年
3 余貽鑫;趙金利;;中國智能電網(wǎng)概況——2010年3月3日于東京智能電網(wǎng)研討會[A];2010年電力系統(tǒng)自動化學(xué)術(shù)研討會論文集[C];2010年
4 趙丙鎮(zhèn);;日本智能電網(wǎng)的現(xiàn)狀及發(fā)展[A];2010年電力系統(tǒng)自動化學(xué)術(shù)研討會論文集[C];2010年
5 金之儉;;國家能源智能電網(wǎng)研發(fā)中心建設(shè)簡介[A];2010電工測試技術(shù)學(xué)術(shù)交流會論文集[C];2010年
6 劉俊;;智能電網(wǎng)統(tǒng)計指標(biāo)研究[A];2010電工測試技術(shù)學(xué)術(shù)交流會論文集[C];2010年
7 王銳;謝蘭;吳文凱;楊昆;;智能電網(wǎng)及其發(fā)展態(tài)勢分析[A];2010年西南三省一市自動化與儀器儀表學(xué)術(shù)年會論文集[C];2010年
8 張熹;;智能電網(wǎng)配用電通信技術(shù)的現(xiàn)在時與將來時[A];2011電力通信管理暨智能電網(wǎng)通信技術(shù)論壇論文集[C];2011年
9 魏林;李博;李楊;;智能電網(wǎng)發(fā)展現(xiàn)狀及探討[A];重慶市電機工程學(xué)會2010年學(xué)術(shù)會議論文集[C];2010年
10 汪永華;汪鳳鳳;;面向21世紀(jì)的我國統(tǒng)一堅強智能電網(wǎng)及應(yīng)用[A];2011年安徽省智能電網(wǎng)技術(shù)論壇論文集[C];2011年
相關(guān)重要報紙文章 前10條
1 潘昊;發(fā)展“智能電網(wǎng)”需要統(tǒng)籌兼顧[N];中國電力報;2009年
2 楚新;美國正式啟動智能電網(wǎng)項目[N];中國經(jīng)濟導(dǎo)報;2009年
3 早報記者 李曉輝;“智能電網(wǎng)不只是電網(wǎng)公司的事,,電信等行業(yè)同樣 面臨很大機遇”[N];東方早報;2009年
4 本報記者 吳生鋒;智能電網(wǎng):工業(yè)轉(zhuǎn)型新“推手”[N];揚州日報;2009年
5 廣東技術(shù)師范學(xué)院經(jīng)濟學(xué)教授 張銳;智能電網(wǎng):全球經(jīng)濟的未來動力與引擎[N];國際商報;2009年
6 本報記者 曾靜婕;美國81億美元打造智能電網(wǎng)“盛宴”[N];中國商報;2009年
7 本報記者 陳穎暉;一個小島的智能電網(wǎng)圖景[N];21世紀(jì)經(jīng)濟報道;2009年
8 徐煒旋;智能電網(wǎng):看上去很美[N];21世紀(jì)經(jīng)濟報道;2009年
9 本報記者 唐燁 本報實習(xí)生 王文清;智能電網(wǎng):一塊被爭奪的經(jīng)濟“蛋糕”[N];解放日報;2010年
10 黃曉華;《智能電網(wǎng)知識讀本》《智能電網(wǎng)技術(shù)》出版發(fā)行[N];國家電網(wǎng)報;2010年
相關(guān)博士學(xué)位論文 前10條
1 馬若飛;智能電網(wǎng)中異構(gòu)通信網(wǎng)絡(luò)的共存問題研究[D];哈爾濱工業(yè)大學(xué);2014年
2 任鵬;智能電網(wǎng)中通信及控制關(guān)鍵技術(shù)研究[D];西安電子科技大學(xué);2014年
3 周黎莎;智能電網(wǎng)低碳效益關(guān)鍵指標(biāo)選取與評價模型研究[D];華北電力大學(xué);2013年
4 黃立新;智能電網(wǎng)條件下輸電檢修優(yōu)化模式與實施方案研究[D];華北電力大學(xué);2013年
5 蘆翔;智能電網(wǎng)中安全可靠的通信系統(tǒng)的構(gòu)建[D];西安電子科技大學(xué);2013年
6 孫蕾;智能電網(wǎng)管理評價指標(biāo)體系與多屬性分析模型研究[D];華北電力大學(xué);2015年
7 李乾;智能電網(wǎng)中的通信網(wǎng)絡(luò)資源管理關(guān)鍵技術(shù)研究[D];北京郵電大學(xué);2015年
8 黎春nf;大型工業(yè)企業(yè)智能電網(wǎng)構(gòu)建研究[D];華中科技大學(xué);2012年
9 曲朝陽;智能電網(wǎng)知識可視化引擎的研究[D];華北電力大學(xué)(河北);2010年
10 嵇靈;不確定因素下的智能電網(wǎng)能量管理及擴容優(yōu)化研究[D];華北電力大學(xué);2015年
相關(guān)碩士學(xué)位論文 前10條
1 施超;智能電網(wǎng)大數(shù)據(jù)相關(guān)應(yīng)用問題研究[D];華南理工大學(xué);2015年
2 黃飛;智能電網(wǎng)發(fā)展水平的綜合評價研究[D];北京交通大學(xué);2016年
3 陸金耀;智能電網(wǎng)用戶行為多維度分類方法及其應(yīng)用研究[D];北京交通大學(xué);2016年
4 王瑋;基于環(huán)簽名和無證書簽名的智能電網(wǎng)繳費方案[D];中國海洋大學(xué);2015年
5 徐毅;堅強智能電網(wǎng)低碳化運行關(guān)鍵技術(shù)研究[D];南昌大學(xué);2015年
6 張海瑞;智能電網(wǎng)綜合評價方法研究[D];上海交通大學(xué);2012年
7 王硯澤;智能電網(wǎng)技術(shù)的發(fā)展簡史[D];山西大學(xué);2012年
8 靖仕寅;智能電網(wǎng)發(fā)展政策的國際比較研究與啟示[D];華北電力大學(xué);2012年
9 王文靜;智能電網(wǎng)低碳效益評價及應(yīng)用研究[D];華北電力大學(xué);2012年
10 徐欣;基于組合評價理論的智能電網(wǎng)綜合評價體系研究[D];華北電力大學(xué);2012年
本文編號:2032413
本文鏈接:http://sikaile.net/kejilunwen/dianlidianqilunwen/2032413.html