云計算中Hadoop技術(shù)研究與應(yīng)用綜述
本文選題:云計算 + 大數(shù)據(jù)。 參考:《計算機科學(xué)》2016年11期
【摘要】:Hadoop作為當今云計算與大數(shù)據(jù)時代背景下最熱門的技術(shù)之一,其相關(guān)生態(tài)圈與Spark技術(shù)的結(jié)合一同影響著學(xué)術(shù)發(fā)展和商業(yè)模式。首先介紹了Hadoop的起源和優(yōu)勢,闡明相關(guān)技術(shù)原理,如MapReduce,HDFS,YARN,Spark等;然后著重分析了當前Hadoop學(xué)術(shù)研究成果,從MapReduce算法的改進與創(chuàng)新、HDFS技術(shù)的優(yōu)化與創(chuàng)新、二次開發(fā)與其它技術(shù)相結(jié)合、應(yīng)用領(lǐng)域創(chuàng)新與實踐4個方面進行總結(jié),并簡述了國內(nèi)外應(yīng)用現(xiàn)狀。而Hadoop與Spark結(jié)合是未來的趨勢,最后展望了Hadoop未來研究的發(fā)展方向和亟需解決的問題。
[Abstract]:Hadoop is one of the most popular technologies in cloud computing and big data era. In this paper, the origin and advantages of Hadoop are introduced, and the related technical principles, such as MapReduceHDFSU YARNSpark, etc., are introduced, and then the current Hadoop academic research results are emphatically analyzed, and the improvement and innovation of MapReduce algorithm and the optimization and innovation of HDFS technology are discussed, and the secondary development is combined with other technologies. Four aspects of innovation and practice in application field are summarized, and the present situation of application at home and abroad is briefly described. The combination of Hadoop and Spark is the trend in the future. Finally, the future research direction of Hadoop and the problems that need to be solved are prospected.
【作者單位】: 空軍工程大學(xué)信息與導(dǎo)航學(xué)院;
【基金】:陜西省自然科學(xué)基金項目(2012JZ8005)資助
【分類號】:TP311.13
【相似文獻】
相關(guān)期刊論文 前10條
1 趙建偉;;大數(shù)據(jù)初探[J];科技資訊;2013年20期
2 桑慶兵;;大數(shù)據(jù)在高校的應(yīng)用與思考[J];南通紡織職業(yè)技術(shù)學(xué)院學(xué)報;2013年02期
3 張心源;李白楊;;大數(shù)據(jù)的概念、技術(shù)及應(yīng)用[J];創(chuàng)新科技;2013年09期
4 魏偉;;銀行業(yè)應(yīng)對互聯(lián)網(wǎng)金融挑戰(zhàn)的策略初探——基于大數(shù)據(jù)背景下的思考[J];福建金融;2014年07期
5 王堯;;基于大數(shù)據(jù)的數(shù)據(jù)處理方法研究分析[J];數(shù)字技術(shù)與應(yīng)用;2014年06期
6 郭亞軍;;大數(shù)據(jù)時代數(shù)字出版服務(wù)模式變革研究[J];經(jīng)濟研究導(dǎo)刊;2014年04期
7 謝添;湯浩;;數(shù)據(jù)大爆炸時代已經(jīng)到來[J];才智;2013年03期
8 楊劍寧;藺坤;王翊新;趙勰;;大數(shù)據(jù)項目的部署分析[J];軟件;2013年12期
9 李芬;朱志祥;劉盛輝;;大數(shù)據(jù)發(fā)展現(xiàn)狀及面臨的問題[J];西安郵電大學(xué)學(xué)報;2013年05期
10 周亮;;“大數(shù)據(jù)”技術(shù)在浙江煙草新時期的應(yīng)用[J];硅谷;2013年19期
,本文編號:2115695
本文鏈接:http://sikaile.net/kejilunwen/ruanjiangongchenglunwen/2115695.html