本文關(guān)鍵詞：一種電力設(shè)備狀態(tài)監(jiān)測大數(shù)據(jù)的分布式聯(lián)機分析處理方法

  更多相關(guān)文章： 狀態(tài)監(jiān)測 大數(shù)據(jù) 關(guān)系型聯(lián)機分析 數(shù)據(jù)模型 層次編碼

【摘要】：電力設(shè)備狀態(tài)監(jiān)測大數(shù)據(jù)分析是一個熱點研究課題,對保障電力設(shè)備的安全穩(wěn)定運行具有重要意義。聯(lián)機分析處理(on-line analytical processing,OLAP)可以多角度、快速存取與分析數(shù)據(jù),是實現(xiàn)電力設(shè)備狀態(tài)監(jiān)測大數(shù)據(jù)分析的一種重要技術(shù)手段。通過分析大數(shù)據(jù)環(huán)境下的OLAP技術(shù),設(shè)計一種電力設(shè)備狀態(tài)監(jiān)測大數(shù)據(jù)分析平臺,給出3種分布式數(shù)據(jù)分析方案,包括基于Hive的關(guān)系型聯(lián)機分析、基于Impala的關(guān)系型聯(lián)機分析和基于HBase的多維聯(lián)機分析。分布式關(guān)系型聯(lián)機分析雖然在一定程度上滿足電力企業(yè)的需求,但其數(shù)據(jù)模型中表之間頻繁的連接操作,導(dǎo)致其出現(xiàn)性能瓶頸。針對分布式關(guān)系型聯(lián)機分析數(shù)據(jù)模型連接操作開銷大、查詢速度慢等問題,提出了基于無連接層次編碼的電力設(shè)備狀態(tài)監(jiān)測數(shù)據(jù)模型,對常規(guī)數(shù)據(jù)模型進行改進,把維表的層次信息進行編碼存儲到事實表中,減少連接操作,以優(yōu)化性能。采用Hive和Impala等大數(shù)據(jù)分析工具,在不同規(guī)模監(jiān)測數(shù)據(jù)集上對本模型的數(shù)據(jù)加載、上卷操作、存儲開銷等方面進行實驗測試。實驗結(jié)果表明,數(shù)據(jù)加載速度約是常規(guī)模型的42%,上卷執(zhí)行時間比常規(guī)數(shù)據(jù)模型縮短40%至49%,存儲開銷大約比常規(guī)星型模型減少37%,驗證了本方法的有效性與可行性,給電力設(shè)備狀態(tài)監(jiān)測大數(shù)據(jù)分析帶來一種新的思路。
【作者單位】： 華北電力大學(xué)控制與計算機工程學(xué)院;
【關(guān)鍵詞】： 狀態(tài)監(jiān)測 大數(shù)據(jù) 關(guān)系型聯(lián)機分析 數(shù)據(jù)模型 層次編碼
【基金】：國家自然科學(xué)基金資助項目(61074078)~~
【分類號】：TM732;TP311.13
【正文快照】： storage cost respect,this model is about 37%less.This reportverified the validity and feasibility of this model to bring thebig data analysis of status monitoring of electric powerequipment to a new train of thought.0引言隨著各類狀態(tài)監(jiān)測設(shè)備和傳感器的廣

【相似文獻】

中國期刊全文數(shù)據(jù)庫 前10條

1 于曉東;;淺談設(shè)備狀態(tài)監(jiān)測技術(shù)在設(shè)備管理及維修中的應(yīng)用[J];中國設(shè)備工程;2009年09期

2 ;抓好設(shè)備狀態(tài)監(jiān)測 保障安全生產(chǎn)提高經(jīng)濟效益[J];設(shè)備管理;1986年01期

3 于云江;采用設(shè)備診斷技術(shù) 開展設(shè)備狀態(tài)維修[J];設(shè)備管理&維修;1998年03期

4 馬林;設(shè)備診斷技術(shù)在一般加工企業(yè)中的應(yīng)用與探索[J];設(shè)備管理與維修;2002年02期

5 趙輝;白秀琴;;《設(shè)備狀態(tài)監(jiān)測與故障診斷》課程教學(xué)研究[J];中國水運(理論版);2006年11期

6 劉順周;關(guān)佳亮;郎洪;;論設(shè)備的維護保養(yǎng)與維修資料的管理[J];科技資訊;2007年15期

7 宋文君,張志云;設(shè)備狀態(tài)監(jiān)測及其注意事項[J];鐵道車輛;1987年06期

8 ;《設(shè)備狀態(tài)監(jiān)測和故障診斷技術(shù)》專輯征訂啟事[J];設(shè)備管理與維修;1989年03期

9 王成;;“設(shè)備狀態(tài)監(jiān)測與診斷技術(shù)應(yīng)用交流會”將在連云港舉行[J];設(shè)備管理與維修;1992年05期

10 周子政,于文立,苑安成,王建華;“包機制”是建立設(shè)備維修兩個機制的有效途徑[J];中國設(shè)備管理;1994年08期

中國重要會議論文全文數(shù)據(jù)庫 前10條

1 顏卓;;開展設(shè)備狀態(tài)監(jiān)測技術(shù)勢在必行[A];2007水業(yè)高級技術(shù)論壇論文集[C];2007年

2 徐麗芬;熊述波;;設(shè)備狀態(tài)監(jiān)測網(wǎng)絡(luò)化技術(shù)在運行管理中的應(yīng)用[A];2003年11省區(qū)市機械工程學(xué)會學(xué)術(shù)會議論文集[C];2003年

3 唐金平;;施工設(shè)備狀態(tài)監(jiān)測和故障診斷技術(shù)應(yīng)用探討[A];第十屆全國設(shè)備監(jiān)測與診斷技術(shù)學(xué)術(shù)會議論文集[C];2000年

4 趙建明;;構(gòu)建設(shè)備狀態(tài)監(jiān)測體系,提高設(shè)備維修管理水平[A];設(shè)備監(jiān)測與診斷技術(shù)及其應(yīng)用——第十二屆全國設(shè)備監(jiān)測與診斷學(xué)術(shù)會議論文集[C];2005年

5 陳進;;設(shè)備狀態(tài)監(jiān)測與故障診斷技術(shù)——最新進展與智能維護系統(tǒng)[A];全國大中型水電廠技術(shù)協(xié)作網(wǎng)第二屆年會論文集[C];2005年

6 胡凌云;;設(shè)備狀態(tài)監(jiān)測參數(shù)的聚類分析與統(tǒng)計建標[A];第十屆全國設(shè)備監(jiān)測與診斷技術(shù)學(xué)術(shù)會議論文集[C];2000年

7 吳廣寧;高波;;我校電氣設(shè)備狀態(tài)監(jiān)測課程建設(shè)及其教材[A];第二屆全國高校電氣工程及其自動化專業(yè)教學(xué)改革研討會論文集（下冊）[C];2004年

8 張霽;;經(jīng)濟有效地開展電氣設(shè)備狀態(tài)監(jiān)測[A];首屆長三角科技論壇——能源科技分論壇論文集[C];2004年

9 張振飛;趙光明;;開展精密診斷,確保設(shè)備安全運行[A];設(shè)備監(jiān)測與診斷技術(shù)及其應(yīng)用——第十二屆全國設(shè)備監(jiān)測與診斷學(xué)術(shù)會議論文集[C];2005年

10 陳磊;韓捷;孫俊杰;董辛e，

本文編號：995737