基于Hadoop的煤炭企業(yè)數(shù)據(jù)共享系統(tǒng)設(shè)計(jì)
本文選題:煤炭企業(yè) + 云計(jì)算; 參考:《煤炭技術(shù)》2017年06期
【摘要】:針對(duì)煤炭企業(yè)數(shù)據(jù)處理能力的不足,將云計(jì)算技術(shù)應(yīng)用到煤炭企業(yè)數(shù)據(jù)共享體系中,提出了一個(gè)利用Hadoop平臺(tái)對(duì)煤炭企業(yè)數(shù)據(jù)進(jìn)行高效共享的系統(tǒng)。首先,介紹了Hadoop平臺(tái)及其關(guān)鍵技術(shù);而后建立了應(yīng)用于煤炭企業(yè)的數(shù)據(jù)共享模型,該模型抽取源數(shù)據(jù)并通過(guò)數(shù)據(jù)集成存儲(chǔ)于數(shù)據(jù)倉(cāng)庫(kù);最后結(jié)合煤炭企業(yè)實(shí)際需求,設(shè)計(jì)了數(shù)據(jù)管理平臺(tái),完成了數(shù)據(jù)集成、模型和并行關(guān)聯(lián)算法的設(shè)計(jì)。
[Abstract]:Aiming at the shortage of data processing ability of coal enterprises, this paper applies cloud computing technology to the data sharing system of coal enterprises, and puts forward a high efficiency data sharing system based on Hadoop platform.Firstly, the Hadoop platform and its key technologies are introduced, and then a data sharing model is established, which extracts the source data and stores them in the data warehouse through data integration.The data management platform is designed, and the data integration, model and parallel association algorithm are designed.
【作者單位】: 石家莊鐵路職業(yè)技術(shù)學(xué)院;
【基金】:河北省高等院?茖W(xué)技術(shù)研究項(xiàng)目(ZC2016137) 河北省科技計(jì)劃項(xiàng)目(15270330) 河北省高等學(xué)校科學(xué)技術(shù)研究重點(diǎn)基金項(xiàng)目(ZD2016057)
【分類(lèi)號(hào)】:F426.21;TP311.13
【相似文獻(xiàn)】
相關(guān)期刊論文 前10條
1 逄利華;張錦春;;基于Hadoop的分布式數(shù)據(jù)庫(kù)系統(tǒng)[J];辦公自動(dòng)化;2014年05期
2 鄭瑋;;Hadoop釋放大數(shù)據(jù)潛能[J];軟件和信息服務(wù);2012年10期
3 劉爾凱;崔振東;;基于HADOOP技術(shù) 實(shí)現(xiàn)銀行歷史數(shù)據(jù)線上化研究[J];金融電子化;2014年01期
4 鄒群;;一種基于Hadoop的數(shù)字圖書(shū)存儲(chǔ)系統(tǒng)設(shè)計(jì)方案[J];黑龍江史志;2014年01期
5 諶章義;畢偉;向萬(wàn)紅;王國(guó)安;吳愛(ài)國(guó);;基于Hadoop的海量電費(fèi)數(shù)據(jù)處理模型[J];計(jì)算機(jī)系統(tǒng)應(yīng)用;2014年05期
6 ;大數(shù)據(jù)不等于Hadoop[J];辦公自動(dòng)化;2014年06期
7 ;保障Hadoop數(shù)據(jù)安全的十大措施[J];計(jì)算機(jī)與網(wǎng)絡(luò);2013年08期
8 王峰;雷葆華;;Hadoop分布式文件系統(tǒng)的模型分析[J];電信科學(xué);2010年12期
9 蘇小會(huì);何婧媛;;Hadoop中任務(wù)調(diào)度算法的改進(jìn)[J];電子設(shè)計(jì)工程;2012年22期
10 林偉偉;;一種改進(jìn)的Hadoop數(shù)據(jù)放置策略[J];華南理工大學(xué)學(xué)報(bào)(自然科學(xué)版);2012年01期
相關(guān)重要報(bào)紙文章 前8條
1 本報(bào)記者 郭濤;機(jī)器大數(shù)據(jù)也離不開(kāi)Hadoop[N];中國(guó)計(jì)算機(jī)報(bào);2013年
2 本報(bào)記者 王星;Hadoop引發(fā)大數(shù)據(jù)之戰(zhàn)[N];電腦報(bào);2012年
3 本報(bào)記者 鄒大斌;Hadoop一體機(jī)降低大數(shù)據(jù)門(mén)檻[N];計(jì)算機(jī)世界;2012年
4 孫定;云計(jì)算、大數(shù)據(jù)與Hadoop[N];計(jì)算機(jī)世界;2011年
5 樂(lè)天 編譯;Hadoop:打開(kāi)大數(shù)據(jù)之門(mén)的金鑰匙[N];計(jì)算機(jī)世界;2012年
6 范范 編譯;Hadoop用戶可以使用多種搜索引擎[N];網(wǎng)絡(luò)世界;2013年
7 波波 編譯;Hadoop、Web 2.0為磁帶帶來(lái)新商機(jī)[N];網(wǎng)絡(luò)世界;2013年
8 本報(bào)記者 郭濤;讓更多人能夠使用Hadoop[N];中國(guó)計(jì)算機(jī)報(bào);2012年
相關(guān)博士學(xué)位論文 前1條
1 宋亞奇;云平臺(tái)下電力設(shè)備監(jiān)測(cè)大數(shù)據(jù)存儲(chǔ)優(yōu)化與并行處理技術(shù)研究[D];華北電力大學(xué)(北京);2016年
相關(guān)碩士學(xué)位論文 前10條
1 劉君;基于Hadoop技術(shù)的氣象數(shù)據(jù)采集及數(shù)據(jù)挖掘平臺(tái)的研究[D];天津理工大學(xué);2015年
2 譚旭;基于物流數(shù)據(jù)的快遞網(wǎng)絡(luò)分析與建模[D];浙江大學(xué);2015年
3 趙偉;基于Hadoop的數(shù)據(jù)挖掘算法并行化研究[D];西南交通大學(xué);2015年
4 趙振崇;基于Hadoop的決策樹(shù)挖掘算法的研究[D];蘭州大學(xué);2015年
5 郭凱振;基于Hadoop的分布式計(jì)算系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];大連海事大學(xué);2015年
6 白亮;基于Hadoop的民航高價(jià)值旅客發(fā)現(xiàn)方法研究[D];中國(guó)民航大學(xué);2015年
7 席屏;基于Hadoop的視頻大數(shù)據(jù)智能預(yù)警系統(tǒng)應(yīng)用研究[D];江蘇科技大學(xué);2015年
8 董立明;基于HADOOP的分布式推薦引擎[D];復(fù)旦大學(xué);2013年
9 陸藝達(dá);基于Hadoop分布式計(jì)算框架的垃圾短信群發(fā)檢測(cè)系統(tǒng)[D];復(fù)旦大學(xué);2013年
10 沈德利;基于Hadoop的密文檢索關(guān)鍵技術(shù)研究[D];西安電子科技大學(xué);2014年
,本文編號(hào):1760604
本文鏈接:http://sikaile.net/gongshangguanlilunwen/1760604.html