本文關(guān)鍵詞：Hadoop房產(chǎn)數(shù)據(jù)平臺(tái)與數(shù)據(jù)倉(cāng)庫(kù)的協(xié)作研究

  更多相關(guān)文章： 云計(jì)算 Hadoop 數(shù)據(jù)傳輸 數(shù)據(jù)倉(cāng)庫(kù)

【摘要】：房產(chǎn)市場(chǎng)的持續(xù)過(guò)熱導(dǎo)致了當(dāng)前供大于求的房產(chǎn)庫(kù)存過(guò)剩,“去庫(kù)存”也就成為解決當(dāng)前經(jīng)濟(jì)發(fā)展問(wèn)題的一大任務(wù)。建立大的數(shù)據(jù)綜合平臺(tái),共享人口、土地、銀行、交易等與房產(chǎn)相關(guān)的數(shù)據(jù),并通過(guò)數(shù)據(jù)的分析挖掘,可提供政府職能部門決策依據(jù),也有助于房地產(chǎn)公司制定銷售策略、規(guī)劃新建項(xiàng)目,實(shí)現(xiàn)“去庫(kù)存”的目標(biāo)。Hadoop大數(shù)據(jù)平臺(tái)能夠低成本地存儲(chǔ)包括各類結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化海量數(shù)據(jù),并擁有強(qiáng)大的數(shù)據(jù)處理能力,是建立房產(chǎn)信息綜合平臺(tái)的理想選擇。將各類分布式存儲(chǔ)的、與房產(chǎn)相關(guān)的數(shù)據(jù)歸聚,并實(shí)現(xiàn)高效數(shù)據(jù)傳輸和轉(zhuǎn)換,將有利于房產(chǎn)數(shù)據(jù)倉(cāng)庫(kù)的建立,而數(shù)據(jù)倉(cāng)庫(kù)的挖掘、分析技術(shù),則是獲取決策和規(guī)劃策略的良好手段。本文在介紹云計(jì)算技術(shù)的基礎(chǔ)上,著重分析了Hadoop大數(shù)據(jù)平臺(tái)的技術(shù)框架和優(yōu)勢(shì)。根據(jù)房產(chǎn)信息綜合平臺(tái)搭建的需求,以及Hadoop大數(shù)據(jù)平臺(tái)和數(shù)據(jù)庫(kù)間數(shù)據(jù)的傳輸要求,模擬搭建了相關(guān)平臺(tái)。運(yùn)用Sqoop數(shù)據(jù)傳輸技術(shù),設(shè)計(jì)并實(shí)現(xiàn)了Hadoop大數(shù)據(jù)平臺(tái)和數(shù)據(jù)庫(kù)間數(shù)據(jù)傳輸。最后,對(duì)Hadoop大數(shù)據(jù)平臺(tái)和數(shù)據(jù)庫(kù)間數(shù)據(jù)傳輸?shù)牟糠纸Y(jié)果進(jìn)行了展示和分析。
【關(guān)鍵詞】：云計(jì)算 Hadoop 數(shù)據(jù)傳輸 數(shù)據(jù)倉(cāng)庫(kù)
【學(xué)位授予單位】：云南大學(xué)
【學(xué)位級(jí)別】：碩士
【學(xué)位授予年份】：2016
【分類號(hào)】：TP311.13
【目錄】：

• 摘要3-4
• Abstract4-7
• 第一章 緒論7-13
• 1.1 研究背景7-8
• 1.2 選題意義8-9
• 1.3 研究現(xiàn)狀和目標(biāo)9-11
• 1.4 本文組織結(jié)構(gòu)11-13
• 第二章 云計(jì)算與數(shù)據(jù)傳輸技術(shù)13-28
• 2.1 云計(jì)算技術(shù)13-17
• 2.1.1 云計(jì)算概念13
• 2.1.2 云計(jì)算特點(diǎn)13-15
• 2.1.3 云計(jì)算的服務(wù)模式15-16
• 2.1.4 云計(jì)算的關(guān)鍵技術(shù)16-17
• 2.2 Hadoop技術(shù)17-22
• 2.2.1 Hadoop簡(jiǎn)介17-18
• 2.2.2 Hadoop技術(shù)框架18-20
• 2.2.3 Hadoop生態(tài)圈20-21
• 2.2.4 Hadoop優(yōu)勢(shì)21-22
• 2.3 數(shù)據(jù)傳輸22-25
• 2.3.1 數(shù)據(jù)傳輸特點(diǎn)22-23
• 2.3.2 數(shù)據(jù)傳輸研究現(xiàn)狀23-25
• 2.4 數(shù)據(jù)倉(cāng)庫(kù)25-27
• 2.4.1 數(shù)據(jù)倉(cāng)庫(kù)建模25-26
• 2.4.2 數(shù)據(jù)倉(cāng)庫(kù)應(yīng)用26-27
• 2.5 小結(jié)27-28
• 第三章 Hadoop大數(shù)據(jù)平臺(tái)與數(shù)據(jù)倉(cāng)庫(kù)結(jié)合設(shè)計(jì)28-35
• 3.1 實(shí)現(xiàn)可行性28-29
• 3.1.1 技術(shù)可行性28
• 3.1.2 經(jīng)濟(jì)可行性28-29
• 3.2 設(shè)計(jì)方案29
• 3.3 結(jié)合系統(tǒng)設(shè)計(jì)29-34
• 3.3.1 設(shè)計(jì)的關(guān)鍵點(diǎn)30-31
• 3.3.2 Hadoop大數(shù)據(jù)平臺(tái)設(shè)計(jì)31-33
• 3.3.3 數(shù)據(jù)傳輸層設(shè)計(jì)33-34
• 3.4 小結(jié)34-35
• 第四章 Hadoop大數(shù)據(jù)平臺(tái)和數(shù)據(jù)倉(cāng)庫(kù)結(jié)合實(shí)現(xiàn)35-52
• 4.1 硬件、軟件配置35
• 4.2 Hadoop大數(shù)據(jù)平臺(tái)實(shí)現(xiàn)35-43
• 4.2.1 SSH免密碼登陸實(shí)現(xiàn)35-37
• 4.2.2 Hadoop集群實(shí)現(xiàn)37-40
• 4.2.3 Hadoop開發(fā)環(huán)境實(shí)現(xiàn)40-41
• 4.2.4 Hadoop大數(shù)據(jù)平臺(tái)測(cè)試41-43
• 4.3 數(shù)據(jù)傳輸層實(shí)現(xiàn)43-44
• 4.4 結(jié)果展示44-51
• 4.4.1 結(jié)合系統(tǒng)界面44-47
• 4.4.2 數(shù)據(jù)傳輸結(jié)果47-51
• 4.5 小結(jié)51-52
• 第五章 總結(jié)與展望52-54
• 5.1 總結(jié)52
• 5.2 展望52-54
• 參考文獻(xiàn)54-57
• 致謝57

，

本文編號(hào)：938366