海量數(shù)據(jù)存儲與查詢策略的優(yōu)化研究
發(fā)布時(shí)間:2017-08-02 01:13
本文關(guān)鍵詞:海量數(shù)據(jù)存儲與查詢策略的優(yōu)化研究
更多相關(guān)文章: 海量數(shù)據(jù) 存儲 查詢 優(yōu)化策略
【摘要】:在全面信息化的過程中,產(chǎn)生了海量的數(shù)據(jù)和信息資源,非常需要一種方法對海量數(shù)據(jù)進(jìn)行科學(xué)高效的組織、管理和使用,以滿足日益多樣的業(yè)務(wù)應(yīng)用,同時(shí)提高信息資源的管理效率。國內(nèi)外的分析表明,海量數(shù)據(jù)管理水平將成為下一輪衡量企業(yè)生命力的指標(biāo)之一。海量數(shù)據(jù)管理的前景雖然樂觀,但目前仍然存在著很多技術(shù)上的難題需要克服。存儲策略的研究側(cè)重于空間效率的改進(jìn),而查詢策略側(cè)重于時(shí)間效率的提高,不能綜合地發(fā)揮出系統(tǒng)的整體優(yōu)勢。本文從這一角度出發(fā),以海量數(shù)據(jù)作為研究對象,研究海量數(shù)據(jù)存儲策略與查詢策略的優(yōu)化。 論文首先分析了國內(nèi)外學(xué)者取得的主要理論研究成果,總結(jié)了現(xiàn)行主要的存儲和查詢策略的特點(diǎn),針對現(xiàn)有研究中存在的問題,提出了優(yōu)化的內(nèi)容和目標(biāo),接著從海量數(shù)據(jù)生命周期出發(fā),深入研究了表分區(qū),基于對象存儲,查詢分解等多項(xiàng)關(guān)鍵技術(shù),然后,提出了利用表分區(qū)技術(shù)的基于對象存儲優(yōu)化策略和基于查詢分解的查詢優(yōu)化策略。而后,針對這些關(guān)鍵技術(shù)進(jìn)行了一系列的探討,通過研究得出優(yōu)化策略的基本方案,同時(shí)把分布式環(huán)境確立為策略驗(yàn)證的環(huán)境。最后,在模擬環(huán)境中實(shí)現(xiàn)了存儲部分的配置信息、文件信息和讀寫操作功能,查詢部分設(shè)計(jì)實(shí)現(xiàn)了查詢分解、查詢優(yōu)化和結(jié)果合成功能;通過以上模塊的綜合作用,完成了對優(yōu)化策略的可行性的驗(yàn)證工作。 本文從全面信息化的實(shí)際需求出發(fā),通過對常規(guī)理論的深入研究,提出了海量數(shù)據(jù)的存儲和查詢的優(yōu)化后的策略,并模擬環(huán)境中進(jìn)行了驗(yàn)證;該優(yōu)化策略平衡了系統(tǒng)的時(shí)間效率和空間效率,最終實(shí)現(xiàn)了系統(tǒng)優(yōu)化的預(yù)期目標(biāo),具有一定的應(yīng)用價(jià)值。
【關(guān)鍵詞】:海量數(shù)據(jù) 存儲 查詢 優(yōu)化策略
【學(xué)位授予單位】:大連海事大學(xué)
【學(xué)位級別】:碩士
【學(xué)位授予年份】:2012
【分類號】:C931.6
【目錄】:
- 摘要5-6
- ABSTRACT6-10
- 第1章 緒論10-16
- 1.1 海量數(shù)據(jù)概念的界定10
- 1.2 選題背景10-11
- 1.3 國內(nèi)外研究現(xiàn)狀11-13
- 1.3.1 海量數(shù)據(jù)存儲策略國內(nèi)外研究現(xiàn)狀11-12
- 1.3.2 海量數(shù)據(jù)查詢策略國內(nèi)外研究現(xiàn)狀12-13
- 1.4 論文內(nèi)容及結(jié)13-16
- 1.4.1 論文的研究內(nèi)容13-14
- 1.4.2 論文的組織結(jié)構(gòu)14-16
- 第2章 海量數(shù)據(jù)常規(guī)存儲策略與查詢策略研究16-26
- 2.1 海量數(shù)據(jù)常規(guī)的存儲策略16-21
- 2.1.1 海量數(shù)據(jù)的存儲介質(zhì)與設(shè)備研究17-19
- 2.1.2 海量數(shù)據(jù)的存儲模式研究19-21
- 2.2 海量數(shù)據(jù)常規(guī)的查詢策略21-25
- 2.2.1 邏輯層策略優(yōu)化研究21-23
- 2.2.2 數(shù)據(jù)劃分技術(shù)策略優(yōu)化研究23-25
- 2.3 本章小結(jié)25-26
- 第3章 海量數(shù)據(jù)存儲與查詢優(yōu)化策略研究26-39
- 3.1 海量數(shù)據(jù)分布式存儲及相關(guān)技術(shù)的應(yīng)用27-33
- 3.1.1 分布式存儲策略概述27-28
- 3.1.2 基于對象存儲技術(shù)28-29
- 3.1.3 列存儲技術(shù)29-31
- 3.1.4 表分區(qū)技術(shù)31-33
- 3.2 海量數(shù)據(jù)分布式查詢及相關(guān)技術(shù)的運(yùn)用33-38
- 3.2.1 分布式查詢策略概述33-34
- 3.2.2 查詢分解方法研究34-35
- 3.2.3 查詢優(yōu)化方法研究35-37
- 3.2.4 結(jié)果合成方法研究37-38
- 3.3 本章小結(jié)38-39
- 第4章 海量數(shù)據(jù)存儲與查詢優(yōu)化策略的實(shí)現(xiàn)39-65
- 4.1 存儲優(yōu)化策略的實(shí)現(xiàn)40-45
- 4.1.1 相關(guān)技術(shù)的應(yīng)用40-41
- 4.1.2 配置信息模塊設(shè)計(jì)實(shí)現(xiàn)41-42
- 4.1.3 文件信息模塊設(shè)計(jì)實(shí)現(xiàn)42-43
- 4.1.4 讀寫操作模塊設(shè)計(jì)實(shí)現(xiàn)43-45
- 4.2 查詢優(yōu)化策略的實(shí)現(xiàn)45-51
- 4.2.1 查詢分解模塊設(shè)計(jì)實(shí)現(xiàn)47-48
- 4.2.2 查詢優(yōu)化模塊設(shè)計(jì)實(shí)現(xiàn)48-50
- 4.2.3 結(jié)果合成模塊設(shè)計(jì)實(shí)現(xiàn)50-51
- 4.3 數(shù)據(jù)庫訪問的實(shí)現(xiàn)51-64
- 4.3.1 數(shù)據(jù)庫的操作步驟52-60
- 4.3.2 數(shù)據(jù)庫的操作方法60-63
- 4.3.3 數(shù)據(jù)訪問的實(shí)現(xiàn)63-64
- 4.4 本章小結(jié)64-65
- 第5章 總結(jié)與展望65-67
- 5.1 全文總結(jié)65
- 5.2 研究展望65-67
- 參考文獻(xiàn)67-71
- 攻讀學(xué)位期間公開發(fā)表論文71-72
- 致謝72
【參考文獻(xiàn)】
中國博士學(xué)位論文全文數(shù)據(jù)庫 前1條
1 侯f ;海量網(wǎng)絡(luò)存儲系統(tǒng)中的多級緩存技術(shù)研究[D];華南理工大學(xué);2011年
中國碩士學(xué)位論文全文數(shù)據(jù)庫 前10條
1 毛遠(yuǎn)宏;面向SAN和NAS融合的安全方案研究[D];西安電子科技大學(xué);2009年
2 苗帥;海量數(shù)據(jù)存儲與全文檢索[D];江蘇科技大學(xué);2011年
3 陳堅(jiān)強(qiáng);DB2數(shù)據(jù)庫索引性能調(diào)整與優(yōu)化[D];上海交通大學(xué);2011年
4 余琴;基于設(shè)計(jì)模式的企業(yè)級應(yīng)用框架研究[D];華中科技大學(xué);2004年
5 李中華;基于.NET的模式實(shí)現(xiàn)和應(yīng)用[D];四川大學(xué);2005年
6 李曉路;數(shù)據(jù)倉庫中海量數(shù)據(jù)存儲與管理的若干關(guān)鍵技術(shù)研究[D];北京郵電大學(xué);2006年
7 楊e,
本文編號:607003
本文鏈接:http://sikaile.net/guanlilunwen/yunyingzuzhiguanlilunwen/607003.html
最近更新
教材專著