一種高效的海量電力暫態(tài)數(shù)據(jù)索引方法
本文關(guān)鍵詞:一種高效的海量電力暫態(tài)數(shù)據(jù)索引方法
更多相關(guān)文章: COMTRADE數(shù)據(jù) 海量數(shù)據(jù) 位圖索引 詞對(duì)齊混合編碼
【摘要】:隨著故障錄波和行波裝置的廣泛應(yīng)用和技術(shù)進(jìn)步,IEEE COMTRADE 1999格式暫態(tài)數(shù)據(jù)(簡稱COMTRADE數(shù)據(jù))已經(jīng)呈現(xiàn)出海量化發(fā)展的趨勢。如何對(duì)海量COMTRADE數(shù)據(jù)進(jìn)行快速檢索和分析也成為當(dāng)前亟待解決的問題。文中研究并設(shè)計(jì)了一種高效的索引框架,該框架構(gòu)建了以詞對(duì)齊混合編碼(WAH)為基礎(chǔ)的位圖索引,通過對(duì)COMTRADE數(shù)據(jù)構(gòu)建元數(shù)據(jù)并建立相關(guān)索引,能夠?qū)崿F(xiàn)高速的電力數(shù)據(jù)檢索,可以解決傳統(tǒng)搜索技術(shù)的性能問題。該框架通過引入兩階段提交協(xié)議(2PC)來保證原始數(shù)據(jù)和元數(shù)據(jù),元數(shù)據(jù)和索引文件的一致性。在與傳統(tǒng)的MySQL關(guān)系數(shù)據(jù)庫的比較測試中,所提方法性能更為優(yōu)越,特別在對(duì)多維數(shù)據(jù)多條件和浮點(diǎn)數(shù)檢索時(shí),優(yōu)勢更為明顯。該框架能夠滿足當(dāng)前海量COMTRADE數(shù)據(jù)檢索的需要,并可應(yīng)用于電力行業(yè)其他大數(shù)據(jù)的存儲(chǔ)檢索和分析。
【作者單位】: 昆明理工大學(xué)計(jì)算中心;昆明理工大學(xué)電力學(xué)院;
【關(guān)鍵詞】: COMTRADE數(shù)據(jù) 海量數(shù)據(jù) 位圖索引 詞對(duì)齊混合編碼
【基金】:國家自然科學(xué)基金資助項(xiàng)目(U1202233,51267009)~~
【分類號(hào)】:TP311.13;TM769
【正文快照】: 0引言作為電力常用的一種數(shù)據(jù)格式,IEEECOMTRADE 1999格式暫態(tài)數(shù)據(jù)(簡稱COMTRADE數(shù)據(jù))被廣泛用于記錄各種電力設(shè)備運(yùn)行狀態(tài),例如故障錄波、在線監(jiān)測、行波裝置數(shù)據(jù)和雷電定位系統(tǒng)等。隨著電力系統(tǒng)自動(dòng)化的快速發(fā)展,大量錄波裝置和行波測距裝置逐步向高采樣率、連續(xù)記錄和海量
【參考文獻(xiàn)】
中國期刊全文數(shù)據(jù)庫 前10條
1 王德文;宋亞奇;朱永利;;基于云計(jì)算的智能電網(wǎng)信息平臺(tái)[J];電力系統(tǒng)自動(dòng)化;2010年22期
2 俞立婷;何俊佳;陳家宏;;輸電線路雷電活動(dòng)時(shí)空分布特征的數(shù)據(jù)挖掘[J];高電壓技術(shù);2008年02期
3 譚丹;楊洪耕;葉茂清;;基于本體和多Agent的電能質(zhì)量監(jiān)測信息智能檢索模型[J];電網(wǎng)技術(shù);2013年10期
4 桂勛;;基于遞推算法的海量COMTRADE數(shù)據(jù)計(jì)算并行化[J];電力系統(tǒng)自動(dòng)化;2014年01期
5 張逸;楊洪耕;葉茂清;;基于分布式文件系統(tǒng)的海量電能質(zhì)量監(jiān)測數(shù)據(jù)管理方案[J];電力系統(tǒng)自動(dòng)化;2014年02期
6 梅華威;米增強(qiáng);吳廣磊;;基于MapReduce模型的間歇性能源海量數(shù)據(jù)處理技術(shù)[J];電力系統(tǒng)自動(dòng)化;2014年15期
7 趙莉;候興哲;胡君;傅宏;孫洪亮;;基于改進(jìn)k-means算法的海量智能用電數(shù)據(jù)分析[J];電網(wǎng)技術(shù);2014年10期
8 余貽鑫;劉艷麗;;智能電網(wǎng)的挑戰(zhàn)性問題[J];電力系統(tǒng)自動(dòng)化;2015年02期
9 陳慧中;陳永光;景寧;陳犖;;PCPF:一種面向多媒體數(shù)據(jù)庫中高維向量匹配的并行索引結(jié)構(gòu)[J];計(jì)算機(jī)學(xué)報(bào);2011年10期
10 張廣斌;束洪春;于繼來;;利用廣義電流模量的行波實(shí)測數(shù)據(jù)半監(jiān)督聚類篩選[J];中國電機(jī)工程學(xué)報(bào);2012年10期
【共引文獻(xiàn)】
中國期刊全文數(shù)據(jù)庫 前10條
1 王景燕;;基于云計(jì)算的電力調(diào)度信息化研究[J];電工技術(shù);2011年12期
2 王德文;;基于云計(jì)算的電力數(shù)據(jù)中心基礎(chǔ)架構(gòu)及其關(guān)鍵技術(shù)[J];電力系統(tǒng)自動(dòng)化;2012年11期
3 丁杰;奚后瑋;韓海韻;周愛華;;面向智能電網(wǎng)的數(shù)據(jù)密集型云存儲(chǔ)策略[J];電力系統(tǒng)自動(dòng)化;2012年12期
4 劉漢宇;牟龍華;;微電網(wǎng)CPS體系架構(gòu)及其物理端研究[J];電力自動(dòng)化設(shè)備;2012年05期
5 梁立松;徐家澍;秦學(xué)東;任宇新;樊俊義;田崇軍;;內(nèi)蒙古電力公司云計(jì)算技術(shù)研究與實(shí)踐[J];電力信息化;2012年01期
6 周國亮;王桂蘭;葛佳;劉治安;孫玉寶;;基于云計(jì)算的用戶側(cè)短期用電負(fù)荷預(yù)測技術(shù)[J];電力信息化;2012年03期
7 陳慧中;陳永光;景寧;陳犖;王鈞;;基于顯著區(qū)域的月球影像內(nèi)容特征研究[J];電子學(xué)報(bào);2012年05期
8 李永福;司馬文霞;陳林;楊鳴;覃彬全;;基于雷電定位數(shù)據(jù)的雷電流參數(shù)隨海拔變化規(guī)律[J];高電壓技術(shù);2011年07期
9 李家啟;申雙和;;采用閃電定位系統(tǒng)的丘陵山區(qū)雷電特征分析[J];高電壓技術(shù);2011年09期
10 黨倩;崔亮;張華峰;;基于MapReduce模型的智能電網(wǎng)數(shù)據(jù)平臺(tái)研究[J];電力信息化;2012年05期
中國重要會(huì)議論文全文數(shù)據(jù)庫 前9條
1 董駿;胡少英;鄭思源;;云計(jì)算技術(shù)在電網(wǎng)智能化中的應(yīng)用展望[A];2013年中國電機(jī)工程學(xué)會(huì)年會(huì)論文集[C];2013年
2 劉海光;潘毅;李立新;;基于云計(jì)算的智能電網(wǎng)經(jīng)濟(jì)調(diào)度研究[A];2013年中國電機(jī)工程學(xué)會(huì)年會(huì)論文集[C];2013年
3 黃蓉;王奔;;面向智能電網(wǎng)的云計(jì)算信息中心的應(yīng)用研究[A];2012電力行業(yè)信息化年會(huì)論文集[C];2012年
4 許高陽;宣筱青;司慶華;顏云松;;云計(jì)算智能電表在電力系統(tǒng)的應(yīng)用[A];2012電力行業(yè)信息化年會(huì)優(yōu)秀論文專輯[C];2012年
5 屈志堅(jiān);郭亮;劉明光;陳秋琳;蔣俊俊;;智能配電網(wǎng)量測信息變斷面柔性壓縮新算法[A];2014年江西省電機(jī)工程學(xué)會(huì)年會(huì)論文集[C];2014年
6 屈志堅(jiān);郭亮;陳秋琳;蔣俊俊;;Hadoop云構(gòu)架的智能調(diào)度無損集群壓縮技術(shù)[A];2014年江西省電機(jī)工程學(xué)會(huì)年會(huì)論文集[C];2014年
7 徐長安;余忠源;;基于Hadoop的海量風(fēng)電數(shù)據(jù)平臺(tái)研究[A];2014電力行業(yè)信息化年會(huì)論文集[C];2014年
8 徐長安;余忠源;;基于Hadoop的海量風(fēng)電數(shù)據(jù)平臺(tái)研究[A];軟件定義 面向未來——2014電力行業(yè)信息化年會(huì)論文集[C];2014年
9 孫峰;錢嘯;曾建梁;金燁;錢偉杰;許晶;;基于大數(shù)據(jù)理念的地市供電公司智能電網(wǎng)規(guī)劃數(shù)據(jù)融合研究[A];電力行業(yè)信息化優(yōu)秀論文集2014——2014年全國電力行業(yè)兩化融合推進(jìn)會(huì)暨全國電力企業(yè)信息化大會(huì)獲獎(jiǎng)?wù)撐腫C];2014年
中國博士學(xué)位論文全文數(shù)據(jù)庫 前7條
1 李家啟;基于LLS的重慶地區(qū)雷電活動(dòng)規(guī)律及其風(fēng)險(xiǎn)評(píng)估研究[D];南京信息工程大學(xué);2012年
2 張浩;配電網(wǎng)協(xié)同保護(hù)與自愈控制研究[D];北京交通大學(xué);2012年
3 王磊;電網(wǎng)故障診斷方法及其系統(tǒng)架構(gòu)研究[D];山東大學(xué);2013年
4 畢艷冰;面向智能電網(wǎng)的通信中間件的關(guān)鍵技術(shù)研究[D];山東大學(xué);2013年
5 李建生;基于電氣信息的變電設(shè)備狀態(tài)漸變過程分析方法研究[D];山東大學(xué);2014年
6 張峗寧;信息物理融合電力系統(tǒng)網(wǎng)絡(luò)化控制研究[D];華中科技大學(xué);2014年
7 耿光超;電力系統(tǒng)穩(wěn)定約束最優(yōu)潮流:模型、算法與并行化[D];浙江大學(xué);2014年
中國碩士學(xué)位論文全文數(shù)據(jù)庫 前10條
1 郭雷風(fēng);農(nóng)業(yè)科研云原型系統(tǒng)設(shè)計(jì)與應(yīng)用理論研究[D];中國農(nóng)業(yè)科學(xué)院;2011年
2 丁黎;基于分類知識(shí)挖掘的雷電活動(dòng)與地形關(guān)聯(lián)性研究[D];華中科技大學(xué);2011年
3 成勤;閃電參數(shù)查詢系統(tǒng)設(shè)計(jì)與應(yīng)用[D];南京信息工程大學(xué);2012年
4 葉敏;虛擬化技術(shù)在高職院校的應(yīng)用[D];浙江工業(yè)大學(xué);2012年
5 徐婷婷;基于云計(jì)算的電力系統(tǒng)潮流分析[D];合肥工業(yè)大學(xué);2012年
6 姚歡;考慮安全性和實(shí)時(shí)性的變電站通信系統(tǒng)研究[D];湖南大學(xué);2011年
7 李曉強(qiáng);智能電網(wǎng)云存儲(chǔ)系統(tǒng)數(shù)據(jù)私密性問題研究[D];華北電力大學(xué);2013年
8 肖凱;基于Hive架構(gòu)的電力設(shè)備狀態(tài)信息數(shù)據(jù)倉庫的研究[D];華北電力大學(xué);2013年
9 李江華;繼電保護(hù)整定計(jì)算云數(shù)據(jù)中心的研究及應(yīng)用[D];華北電力大學(xué);2013年
10 湛維明;云計(jì)算環(huán)境下的發(fā)電優(yōu)化調(diào)度并行算法研究[D];華北電力大學(xué);2013年
【二級(jí)參考文獻(xiàn)】
中國期刊全文數(shù)據(jù)庫 前10條
1 孫雪;李昆侖;胡夕坤;趙瑞;;基于半監(jiān)督K-means的K值全局尋優(yōu)算法[J];北京交通大學(xué)學(xué)報(bào);2009年06期
2 唐文忠;莫偉棟;;基于共享模型的工作流表單系統(tǒng)設(shè)計(jì)[J];北京航空航天大學(xué)學(xué)報(bào);2008年04期
3 王燕;申元霞;陶春梅;;面向領(lǐng)域的數(shù)據(jù)驅(qū)動(dòng)自主式知識(shí)獲取模型及實(shí)現(xiàn)[J];重慶郵電大學(xué)學(xué)報(bào)(自然科學(xué)版);2009年04期
4 劉興杰;米增強(qiáng);楊奇遜;樊小偉;;一種基于EMD的短期風(fēng)速多步預(yù)測方法[J];電工技術(shù)學(xué)報(bào);2010年04期
5 鄭偉;周喜超;王維洲;鄭晶晶;;一種高性能的多級(jí)異構(gòu)電能質(zhì)量數(shù)據(jù)庫同步方法[J];電力科學(xué)與工程;2010年10期
6 闕連元,葉世勛,丁劍明;開放式SCADA/EMS系統(tǒng)支持的在線負(fù)荷預(yù)測系統(tǒng)[J];電力系統(tǒng)自動(dòng)化;1993年10期
7 張立華,徐文立,常成,馮大為;一種適用于微機(jī)保護(hù)的新的遞推DFT算法[J];電力系統(tǒng)自動(dòng)化;2000年05期
8 徐丙垠,李京,陳平,陳羽,董新洲,葛耀中,P.F.Gale;現(xiàn)代行波測距技術(shù)及其應(yīng)用[J];電力系統(tǒng)自動(dòng)化;2001年23期
9 蘇文輝,李鋼;一種能濾去衰減直流分量的改進(jìn)全波傅氏算法[J];電力系統(tǒng)自動(dòng)化;2002年23期
10 黃愷,孫苓生;繼電保護(hù)傅氏算法中濾除直流分量的一種簡便算法[J];電力系統(tǒng)自動(dòng)化;2003年04期
,本文編號(hào):599795
本文鏈接:http://sikaile.net/kejilunwen/dianlilw/599795.html