地震監(jiān)測數(shù)據(jù)的Hadoop存儲解決方案
發(fā)布時間:2021-05-05 17:19
根據(jù)地震監(jiān)測數(shù)據(jù)日常存儲實際情況,結(jié)合目前主流的Hadoop技術(shù),提出地震監(jiān)測數(shù)據(jù)的大數(shù)據(jù)存儲方案,以解決數(shù)據(jù)存儲設(shè)備選購常見問題,并對數(shù)據(jù)存儲環(huán)境進行詳細配置。以內(nèi)蒙古自治區(qū)地震局測震數(shù)據(jù)為樣本,在虛擬機上搭建偽分布集群方式,對數(shù)據(jù)進行上傳及下載操作,以驗證該方案的可行性。結(jié)果表明:使用Hadoop技術(shù)進行地震監(jiān)測數(shù)據(jù)存儲可靠性更高,且在對歷史地震監(jiān)測數(shù)據(jù)進行處理時,分析統(tǒng)計手段更多,數(shù)據(jù)讀取速度更快。
【文章來源】:華南地震. 2020,40(03)
【文章頁數(shù)】:6 頁
【文章目錄】:
0 引言
1 關(guān)于Hadoop和大數(shù)據(jù)
1.1 Map Reduce離線計算
1.2 YARN資源調(diào)度
2 地震監(jiān)測數(shù)據(jù)存儲方案
2.1 監(jiān)測數(shù)據(jù)的存儲結(jié)構(gòu)
2.2 大數(shù)據(jù)的數(shù)量級
2.3 物理硬件選擇
2.4 集群規(guī)劃部署
2.5 環(huán)境配置
3 可行性驗證
3.1 監(jiān)測數(shù)據(jù)上傳測試
3.2 已上傳數(shù)據(jù)可操作性測試
4 總結(jié)
【參考文獻】:
期刊論文
[1]基于Hadoop的風力發(fā)電監(jiān)測大數(shù)據(jù)存儲優(yōu)化及并行查詢方法[J]. 王林童,趙騰,張焰,蘇運. 電測與儀表. 2018(11)
[2]基于Hadoop的RDF數(shù)據(jù)存儲及查詢優(yōu)化[J]. 徐德智,劉揚,Sarfraz Ahmed. 計算機應(yīng)用研究. 2017(02)
[3]Hadoop平臺下的地震波形數(shù)據(jù)存儲與應(yīng)用規(guī)劃[J]. 王丹寧,柴旭超,王文青. 軟件工程. 2016(01)
[4]基于Hadoop的海量數(shù)據(jù)存儲系統(tǒng)設(shè)計[J]. 王海榮,劉珂. 科技通報. 2014(09)
[5]測震專業(yè)軟件評估平臺在地震行業(yè)中的應(yīng)用[J]. 章靜,林捷,楊樂. 震災(zāi)防御技術(shù). 2013(03)
[6]通用測震數(shù)據(jù)獲取軟件包的設(shè)計與實現(xiàn)[J]. 周輝,申學林,王文青,馬亮,任海軍,程陳. 地震研究. 2011(01)
本文編號:3170279
【文章來源】:華南地震. 2020,40(03)
【文章頁數(shù)】:6 頁
【文章目錄】:
0 引言
1 關(guān)于Hadoop和大數(shù)據(jù)
1.1 Map Reduce離線計算
1.2 YARN資源調(diào)度
2 地震監(jiān)測數(shù)據(jù)存儲方案
2.1 監(jiān)測數(shù)據(jù)的存儲結(jié)構(gòu)
2.2 大數(shù)據(jù)的數(shù)量級
2.3 物理硬件選擇
2.4 集群規(guī)劃部署
2.5 環(huán)境配置
3 可行性驗證
3.1 監(jiān)測數(shù)據(jù)上傳測試
3.2 已上傳數(shù)據(jù)可操作性測試
4 總結(jié)
【參考文獻】:
期刊論文
[1]基于Hadoop的風力發(fā)電監(jiān)測大數(shù)據(jù)存儲優(yōu)化及并行查詢方法[J]. 王林童,趙騰,張焰,蘇運. 電測與儀表. 2018(11)
[2]基于Hadoop的RDF數(shù)據(jù)存儲及查詢優(yōu)化[J]. 徐德智,劉揚,Sarfraz Ahmed. 計算機應(yīng)用研究. 2017(02)
[3]Hadoop平臺下的地震波形數(shù)據(jù)存儲與應(yīng)用規(guī)劃[J]. 王丹寧,柴旭超,王文青. 軟件工程. 2016(01)
[4]基于Hadoop的海量數(shù)據(jù)存儲系統(tǒng)設(shè)計[J]. 王海榮,劉珂. 科技通報. 2014(09)
[5]測震專業(yè)軟件評估平臺在地震行業(yè)中的應(yīng)用[J]. 章靜,林捷,楊樂. 震災(zāi)防御技術(shù). 2013(03)
[6]通用測震數(shù)據(jù)獲取軟件包的設(shè)計與實現(xiàn)[J]. 周輝,申學林,王文青,馬亮,任海軍,程陳. 地震研究. 2011(01)
本文編號:3170279
本文鏈接:http://sikaile.net/kejilunwen/diqiudizhi/3170279.html
最近更新
教材專著