本文關(guān)鍵詞：電力大數(shù)據(jù)檢索方法研究，由筆耕文化傳播整理發(fā)布。

【摘要】：在電力系統(tǒng)中,隨著電力行業(yè)數(shù)字化、信息化的發(fā)展,電網(wǎng)數(shù)據(jù)來(lái)源多元化、復(fù)雜化,各種智能電表、傳感器、信息系統(tǒng)等分布式數(shù)據(jù)源在發(fā)電、輸電、配電、用電及調(diào)度、營(yíng)銷等多個(gè)環(huán)節(jié)持續(xù)不斷地產(chǎn)生大量數(shù)據(jù),促使電力數(shù)據(jù)呈幾何級(jí)數(shù)增長(zhǎng)。這些數(shù)據(jù)是建設(shè)穩(wěn)定、可靠、高效智能電網(wǎng)的支撐性元素之一,它在揭示電力行業(yè)內(nèi)部某些特有的規(guī)律的同時(shí),反映著社會(huì)的經(jīng)濟(jì)發(fā)展?fàn)顩r,還對(duì)企業(yè)的長(zhǎng)遠(yuǎn)發(fā)展有至關(guān)重要的作用,是未來(lái)電力發(fā)展的重要參考依據(jù)。本文主要對(duì)怎樣利用數(shù)據(jù)分析技術(shù)在海量的電力數(shù)據(jù)中快速檢索到有價(jià)值的信息進(jìn)行了研究和探索。首先,分析了電力大數(shù)據(jù)檢索的研究背景及意義,研究了當(dāng)前國(guó)內(nèi)外對(duì)電力大數(shù)據(jù)以及其檢索方法的研究現(xiàn)狀,并歸納總結(jié)了電力系統(tǒng)中大數(shù)據(jù)的來(lái)源、數(shù)據(jù)特點(diǎn)以及關(guān)鍵技術(shù)以及大數(shù)據(jù)檢索方法和相關(guān)技術(shù)。其次,提出一種基于流形排序的電網(wǎng)截面數(shù)據(jù)檢索方法。針對(duì)電網(wǎng)數(shù)據(jù)數(shù)量大、維度高的特點(diǎn),考慮到在數(shù)據(jù)檢索時(shí)多維度查詢效率不高,檢索結(jié)果無(wú)法多維度整體匹配的問(wèn)題。本文提出的基于流形排序的檢索方法,將電網(wǎng)截面數(shù)據(jù)描述成多維向量空間中的對(duì)應(yīng)點(diǎn),通過(guò)電力數(shù)據(jù)集的近似流形結(jié)構(gòu),使之與源查詢之間具有較高的相關(guān)性,有效避免相關(guān)性度量對(duì)高維數(shù)據(jù)查詢處理的不足。最后,構(gòu)建一種適合電力數(shù)據(jù)特點(diǎn)的雙層混合索引結(jié)構(gòu)�？紤]到電力數(shù)據(jù)中數(shù)據(jù)類型復(fù)雜多樣,字符型和數(shù)值型屬性并存,構(gòu)建基于B+樹以及倒排索引的雙層混合索引,來(lái)完成對(duì)電力數(shù)據(jù)的檢索需求。為適合大規(guī)模數(shù)據(jù)的處理需求,在上述提出的索引結(jié)構(gòu)基礎(chǔ)上實(shí)現(xiàn)索引的并行化,通過(guò)Hadoop平臺(tái)在各個(gè)分節(jié)點(diǎn)計(jì)算機(jī)上構(gòu)建本地索引,然后在主機(jī)節(jié)點(diǎn)端構(gòu)建主索引,通過(guò)主索引定位本地索引,有利于減少數(shù)據(jù)的查詢時(shí)間,加快查詢速度。
【關(guān)鍵詞】：大數(shù)據(jù) 電力大數(shù)據(jù) 數(shù)據(jù)檢索 流形排序 索引
【學(xué)位授予單位】：東北電力大學(xué)
【學(xué)位級(jí)別】：碩士
【學(xué)位授予年份】：2016
【分類號(hào)】：TM769;TP311.13
【目錄】：

• 摘要6-7
• Abstract7-10
• 第1章 緒論10-14
• 1.1 課題研究背景及意義10-11
• 1.2 國(guó)內(nèi)外的研究發(fā)展現(xiàn)狀11-12
• 1.2.1 電力大數(shù)據(jù)的研究現(xiàn)狀11
• 1.2.2 大數(shù)據(jù)檢索方法現(xiàn)狀11-12
• 1.3 本文主要研究?jī)?nèi)容12-13
• 1.4 全文工作安排13-14
• 第2章 電力大數(shù)據(jù)特征及其檢索方法14-24
• 2.1 大數(shù)據(jù)定義14
• 2.2 電力大數(shù)據(jù)特點(diǎn)及其關(guān)鍵技術(shù)14-18
• 2.2.1 電力大數(shù)據(jù)的來(lái)源及分類14-16
• 2.2.2 電力大數(shù)據(jù)特征16-17
• 2.2.3 電力大數(shù)據(jù)的關(guān)鍵技術(shù)17-18
• 2.3 數(shù)據(jù)檢索方法18-20
• 2.3.1 關(guān)鍵字檢索19
• 2.3.2 語(yǔ)義檢索19-20
• 2.3.3 分布式信息檢索20
• 2.4 檢索的相關(guān)技術(shù)20-23
• 2.4.1 索引技術(shù)20-22
• 2.4.2 B+樹技術(shù)22-23
• 2.5 本章小結(jié)23-24
• 第3章 電力大數(shù)據(jù)索引的設(shè)計(jì)與實(shí)現(xiàn)24-35
• 3.1 基于B+樹的混合索引24-27
• 3.1.1 索引構(gòu)建思想24-25
• 3.1.2 混合索引結(jié)構(gòu)設(shè)計(jì)25-26
• 3.1.3 索引的創(chuàng)建過(guò)程26
• 3.1.4 索引查詢算法26-27
• 3.2 混合索引的有效性驗(yàn)證27-28
• 3.2.1 時(shí)間性能分析與比較27
• 3.2.2 查詢效率分析與比較27-28
• 3.3 索引的并行化實(shí)現(xiàn)28-33
• 3.3.1 MapReduce編程模型29-30
• 3.3.2 分布式索引架構(gòu)30
• 3.3.3 分布式索引算法30-32
• 3.3.4 實(shí)驗(yàn)驗(yàn)證32-33
• 3.4 本章小結(jié)33-35
• 第4章 基于流形排序的電力數(shù)據(jù)檢索方法35-44
• 4.1 流形排序的基本原理35-36
• 4.2 基于流行排序的數(shù)據(jù)檢索算法36-40
• 4.2.1 問(wèn)題的定義36-37
• 4.2.2 加權(quán)圖模型的構(gòu)建37-39
• 4.2.3 算法流程描述及分析39-40
• 4.3 實(shí)驗(yàn)驗(yàn)證與結(jié)果分析40-43
• 4.3.1 實(shí)驗(yàn)數(shù)據(jù)和評(píng)價(jià)標(biāo)準(zhǔn)40-41
• 4.3.2 實(shí)驗(yàn)結(jié)果分析41-43
• 4.4 本章小結(jié)43-44
• 結(jié)論44-46
• 參考文獻(xiàn)46-50
• 攻讀學(xué)位期間發(fā)表的學(xué)術(shù)論文50-51
• 致謝51

【參考文獻(xiàn)】

中國(guó)期刊全文數(shù)據(jù)庫(kù) 前10條

1 張東霞;苗新;劉麗平;張焰;劉科研;;智能電網(wǎng)大數(shù)據(jù)技術(shù)發(fā)展研究[J];中國(guó)電機(jī)工程學(xué)報(bào);2015年01期

2 黃斌;彭宇行;彭小寧;;云計(jì)算環(huán)境中高效分布式索引技術(shù)[J];武漢大學(xué)學(xué)報(bào)(信息科學(xué)版);2014年11期

3 黃斌;彭宇行;彭小寧;;云計(jì)算中海量數(shù)據(jù)高效索引方法[J];計(jì)算機(jī)應(yīng)用研究;2014年10期

4 張文q，

本文編號(hào)：292454