隨著互聯(lián)網(wǎng)的普及和技術(shù)的快速發(fā)展,“網(wǎng)購(gòu)”已經(jīng)成為了人們的生活常態(tài),電子商務(wù)行業(yè)得到了蓬勃發(fā)展,同時(shí)也帶動(dòng)物流的崛起;物流作為第三利潤(rùn)源,對(duì)電子商務(wù)的發(fā)展有著很重要的影響。當(dāng)前的時(shí)代是一個(gè)信息化的時(shí)代,也是一個(gè)大數(shù)據(jù)的時(shí)代,數(shù)據(jù)在今天擁有著很重要的作用,企業(yè)的決策者再也不能像以前那樣靠著經(jīng)驗(yàn)來(lái)對(duì)公司的經(jīng)營(yíng)狀況做出決策;對(duì)企業(yè)數(shù)據(jù)的充分把握,對(duì)于公司的經(jīng)營(yíng)決策有著舉足輕重的影響。在商業(yè)戰(zhàn)爭(zhēng)日益激烈的今天,眾多企業(yè)都在往著信息化道路邁進(jìn),為了在同類(lèi)型企業(yè)中謀求更好的發(fā)展,不斷提升自身的信息化能力和水平。本文首先分析在電子商務(wù)物流中可能需要面臨的問(wèn)題和所要解決的問(wèn)題,了解熟悉電子商務(wù)物流在企業(yè)中的需求。為了解決電子商務(wù)物流海量數(shù)據(jù)的不斷增加,各個(gè)業(yè)務(wù)系統(tǒng)的數(shù)據(jù)存在數(shù)據(jù)孤島化的現(xiàn)象等問(wèn)題,本文構(gòu)建基于電子商務(wù)物流的數(shù)據(jù)倉(cāng)庫(kù)來(lái)解決以上的問(wèn)題。對(duì)數(shù)據(jù)倉(cāng)庫(kù)的整體體系和架構(gòu)進(jìn)行設(shè)計(jì)。整體數(shù)據(jù)倉(cāng)庫(kù)都是在Hadoop集群環(huán)境上進(jìn)行設(shè)計(jì)構(gòu)建,利用數(shù)據(jù)倉(cāng)庫(kù)工具Hive對(duì)數(shù)據(jù)進(jìn)行處理,Hive會(huì)根據(jù)開(kāi)發(fā)人員所寫(xiě)的Hive sql程序轉(zhuǎn)化為MapReduce程序或者Spark程序,極大的方便了開(kāi)發(fā)人員對(duì)海量數(shù)據(jù)的...

【文章頁(yè)數(shù)】：87 頁(yè)

【學(xué)位級(jí)別】：碩士

【部分圖文】：

圖１－１?ＨＤＦＳ的運(yùn)行底層結(jié)構(gòu)和運(yùn)行流程圖??Ｆｉｇｕｒｅ?１－１?Ｕｎｄｅｒｌｙｉｎｇ?ｓｔｒｕｃｔｕｒｅ?ａｎｄ?ｍｎｎｉｎｇ?ｆｌｏｗ?ｏｆ?ｔｈｅ?ＨＤＦＳ??

數(shù)據(jù)信息，ｄａｔａｎｏｄｅ主要存??儲(chǔ)的是用戶(hù)所要存儲(chǔ)的數(shù)據(jù)???１?鏖十》＾?？?—?ｃｈｅｃｋｐｏｉｎｔ機(jī)??■?－?－－，ｎａｍｅｎｏｄｅ?——－——？?ｓｅｃｏｎｄａｒｙ????溝求查詢(xún)數(shù)據(jù)???ｈ??ｎａｍｅｎｏｄｅ??客戶(hù)端??載均衡?心跳機(jī)＾副本管理??ａ?，???....

圖２－２?Ｙａｒｎ運(yùn)行時(shí)的底層結(jié)構(gòu)和流程圖??Ｆｉｇｕｒｅ?２－２?Ｂａｓｉｃ?ｓｔｒｕｃｔｕｒｅ?ａｎｄ?ｆｌｏｗｃｈａｒｔ?ｏｆ?Ｙａｍ?ｒｕｎｎｉｎｇ??

＾ｄｕｌｅｒ??客戶(hù)端?丨任－夸調(diào)釀??＠行?＼?從任務(wù)隊(duì)列中領(lǐng)取任務(wù)??ＭＲＡｐｐＭａｓｊ�。荆蓿椋妫夼炞袆�(wù)?＼丨從任務(wù)Ｐ人列??倩況?＼?１中麵仔努??￣丨?－丨￣??ＭＲＡｐｐＭａｓｔｅｒ????ｃｏｎｔａｉｎｅｒ?ｃｏｎｔａｉｎｅｉ??ｖａｒｎｃｈｉｌｃ：?＇．?ｒ－－￣....

圖２－３?Ｈｉｖｅ的底層架構(gòu)圖??Ｆｉｇｕｒｅ?２－３?Ｕｎｄｅｒｌｙｉｎｇ?ａｒｃｈｉｔｅｃｔｕｒｅ?ｏｆ?Ｈｉｖｅ??

?２數(shù)據(jù)倉(cāng)庫(kù)的相關(guān)技術(shù)???ＣＬＩ?Ｔｈｒｉｆｔ?Ｓｅｒｖｅｒ??｜?ＪＤＢＣ?｜?１?ＯＤＢＣ?１??ｄｒｉｖｅｒ??ｍｅｔａ?ａ?ｌ?ａ?．凋￥??Ｓｔｏｒｅ?叫?ｐｈｙｓｉｃａｌ?ｑｕｅｒｙ?ｍｒ或??ｐａｒｓｅｒ?ｐｌａｎ?ｏｐｔｉｍｉｚｅｒ?者??解析器?編譯器?優(yōu)化器....

圖２－４?ｆｌｕｍｅ的運(yùn)行流程圖??－

?２數(shù)據(jù)倉(cāng)庫(kù)的相關(guān)技術(shù)???ＣＬＩ?Ｔｈｒｉｆｔ?Ｓｅｒｖｅｒ??｜?ＪＤＢＣ?｜?１?ＯＤＢＣ?１??ｄｒｉｖｅｒ??ｍｅｔａ?ａ?ｌ?ａ?．凋￥??Ｓｔｏｒｅ?叫?ｐｈｙｓｉｃａｌ?ｑｕｅｒｙ?ｍｒ或??ｐａｒｓｅｒ?ｐｌａｎ?ｏｐｔｉｍｉｚｅｒ?者??解析器?編譯器?優(yōu)化器....

本文編號(hào)：3927129