云計(jì)算中Hadoop技術(shù)研究與應(yīng)用綜述
本文選題:云計(jì)算 + 大數(shù)據(jù) ; 參考:《計(jì)算機(jī)科學(xué)》2016年11期
【摘要】:Hadoop作為當(dāng)今云計(jì)算與大數(shù)據(jù)時(shí)代背景下最熱門的技術(shù)之一,其相關(guān)生態(tài)圈與Spark技術(shù)的結(jié)合一同影響著學(xué)術(shù)發(fā)展和商業(yè)模式。首先介紹了Hadoop的起源和優(yōu)勢(shì),闡明相關(guān)技術(shù)原理,如MapReduce,HDFS,YARN,Spark等;然后著重分析了當(dāng)前Hadoop學(xué)術(shù)研究成果,從MapReduce算法的改進(jìn)與創(chuàng)新、HDFS技術(shù)的優(yōu)化與創(chuàng)新、二次開發(fā)與其它技術(shù)相結(jié)合、應(yīng)用領(lǐng)域創(chuàng)新與實(shí)踐4個(gè)方面進(jìn)行總結(jié),并簡(jiǎn)述了國(guó)內(nèi)外應(yīng)用現(xiàn)狀。而Hadoop與Spark結(jié)合是未來的趨勢(shì),最后展望了Hadoop未來研究的發(fā)展方向和亟需解決的問題。
[Abstract]:Hadoop is one of the most popular technologies in cloud computing and big data era. In this paper, the origin and advantages of Hadoop are introduced, and the related technical principles, such as MapReduceHDFSU YARNSpark, etc., are introduced, and then the current Hadoop academic research results are emphatically analyzed, and the improvement and innovation of MapReduce algorithm and the optimization and innovation of HDFS technology are discussed, and the secondary development is combined with other technologies. Four aspects of innovation and practice in application field are summarized, and the present situation of application at home and abroad is briefly described. The combination of Hadoop and Spark is the trend in the future. Finally, the future research direction of Hadoop and the problems that need to be solved are prospected.
【作者單位】: 空軍工程大學(xué)信息與導(dǎo)航學(xué)院;
【基金】:陜西省自然科學(xué)基金項(xiàng)目(2012JZ8005)資助
【分類號(hào)】:TP311.13
【相似文獻(xiàn)】
相關(guān)期刊論文 前10條
1 趙建偉;;大數(shù)據(jù)初探[J];科技資訊;2013年20期
2 桑慶兵;;大數(shù)據(jù)在高校的應(yīng)用與思考[J];南通紡織職業(yè)技術(shù)學(xué)院學(xué)報(bào);2013年02期
3 張心源;李白楊;;大數(shù)據(jù)的概念、技術(shù)及應(yīng)用[J];創(chuàng)新科技;2013年09期
4 魏偉;;銀行業(yè)應(yīng)對(duì)互聯(lián)網(wǎng)金融挑戰(zhàn)的策略初探——基于大數(shù)據(jù)背景下的思考[J];福建金融;2014年07期
5 王堯;;基于大數(shù)據(jù)的數(shù)據(jù)處理方法研究分析[J];數(shù)字技術(shù)與應(yīng)用;2014年06期
6 郭亞軍;;大數(shù)據(jù)時(shí)代數(shù)字出版服務(wù)模式變革研究[J];經(jīng)濟(jì)研究導(dǎo)刊;2014年04期
7 謝添;湯浩;;數(shù)據(jù)大爆炸時(shí)代已經(jīng)到來[J];才智;2013年03期
8 楊劍寧;藺坤;王翊新;趙勰;;大數(shù)據(jù)項(xiàng)目的部署分析[J];軟件;2013年12期
9 李芬;朱志祥;劉盛輝;;大數(shù)據(jù)發(fā)展現(xiàn)狀及面臨的問題[J];西安郵電大學(xué)學(xué)報(bào);2013年05期
10 周亮;;“大數(shù)據(jù)”技術(shù)在浙江煙草新時(shí)期的應(yīng)用[J];硅谷;2013年19期
,本文編號(hào):2115695
本文鏈接:http://sikaile.net/kejilunwen/ruanjiangongchenglunwen/2115695.html