近年來(lái)，社會(huì)化網(wǎng)絡(luò)服務(wù)在國(guó)內(nèi)開(kāi)始興起。微博從一個(gè)新興的社會(huì)化網(wǎng)絡(luò)平臺(tái)的概念，逐步走近用戶，被越來(lái)越多的用戶接納并使用，這個(gè)容量只有140個(gè)字，通過(guò)手機(jī)或電腦隨時(shí)隨地閱讀、更新、聯(lián)絡(luò)的服務(wù)不斷在改寫著信息傳播的歷史。伴隨而來(lái)的是網(wǎng)站對(duì)數(shù)據(jù)庫(kù)高并發(fā)讀寫的需求，對(duì)海量數(shù)據(jù)的高效率存儲(chǔ)和訪問(wèn)的需求以及對(duì)數(shù)據(jù)庫(kù)的高可擴(kuò)展性和高可用性的需求都在日益增加。目前主流微博主要使用的是Mysql數(shù)據(jù)庫(kù)的分布式實(shí)踐來(lái)提供數(shù)據(jù)支持。但是目前來(lái)看，仍有幾個(gè)問(wèn)題沒(méi)有很好的解決就是如何實(shí)現(xiàn)系統(tǒng)易于擴(kuò)展、低延遲、高可用和異地分布、可監(jiān)控以及去中心化。本文旨在通過(guò)構(gòu)建基于Hadoop的海量數(shù)據(jù)微博系統(tǒng)來(lái)解決這幾個(gè)問(wèn)題。Hadoop框架的底層實(shí)現(xiàn)部分HDFS分布式文件系統(tǒng)，具有高容錯(cuò)性、高傳輸率等特點(diǎn)，訪問(wèn)文件系統(tǒng)中的數(shù)據(jù)可以以流的形式，從而解決安全性問(wèn)題和訪問(wèn)速度，實(shí)現(xiàn)海量數(shù)據(jù)的存儲(chǔ)管理。建立在HDFS之上的HBase，提供高性能、高可靠性、可伸縮、列存儲(chǔ)、實(shí)時(shí)讀寫的數(shù)據(jù)庫(kù)系統(tǒng)。MapReduce是一種編程模型，用于大規(guī)模數(shù)據(jù)集的并行運(yùn)算。Hadoop上的HDFS、MapReduce和HBase可以說(shuō)是Hadoop的三... 

【文章來(lái)源】：北京工業(yè)大學(xué)北京市 211工程院校

【文章頁(yè)數(shù)】：70 頁(yè)

【學(xué)位級(jí)別】：碩士

【文章目錄】：
摘要
Abstract
第1章 緒論
    1.1 課題背景及意義
    1.2 云存儲(chǔ)系統(tǒng)的國(guó)內(nèi)外研究現(xiàn)狀
    1.3 主要研究工作
    1.4 論文組織結(jié)構(gòu)
第2章 關(guān)鍵技術(shù)
    2.1 HDFS 分布式文件系統(tǒng)
    2.2 HBase 分布式數(shù)據(jù)庫(kù)
    2.3 MapReduce 數(shù)據(jù)處理編程模型
        2.3.1 MapReduce 簡(jiǎn)介
        2.3.2 MapReduce 算法
    2.4 Hadoop 與傳統(tǒng)關(guān)系型數(shù)據(jù)庫(kù)的比較
    2.5 本章小結(jié)
第3章 基于 Hadoop 微博系統(tǒng)需求分析
    3.1 業(yè)務(wù)流程分析
    3.2 系統(tǒng)需求分析
        3.2.1 系統(tǒng)用戶分類
        3.2.2 系統(tǒng)基本功能
    3.3 非功能性需求分析
    3.4 本章小結(jié)
第4章 基于 Hadoop 微博系統(tǒng)設(shè)計(jì)
    4.1 系統(tǒng)總體架構(gòu)設(shè)計(jì)
        4.1.1 系統(tǒng)邏輯架構(gòu)
        4.1.2 系統(tǒng)技術(shù)結(jié)構(gòu)
    4.2 系統(tǒng)及網(wǎng)絡(luò)安全策略
    4.3 系統(tǒng)功能結(jié)構(gòu)
    4.4 處理流程設(shè)計(jì)
    4.5 數(shù)據(jù)庫(kù)結(jié)構(gòu)
    4.6 本章小結(jié)
第5章 基于 Hadoop 微博系統(tǒng)實(shí)現(xiàn)
    5.1 用戶模塊
        5.1.1 用戶注冊(cè)模塊
        5.1.2 用戶注冊(cè)模塊
        5.1.3 個(gè)人信息管理模塊
    5.2 內(nèi)容發(fā)布模塊
        5.2.1 發(fā)布微博模塊
        5.2.2 轉(zhuǎn)發(fā)微博模塊
        5.2.3 發(fā)布評(píng)論模塊
    5.3 關(guān)注模塊
        5.3.1 關(guān)注用戶模塊
        5.3.2 查看關(guān)注用戶的微博模塊
    5.4 搜索服務(wù)模塊
    5.5 同步服務(wù)模塊
    5.6 管理后臺(tái)模塊
        5.6.1 權(quán)限管理模塊
        5.6.2 認(rèn)證管理模塊
        5.6.3 審核管理模塊
    5.7 應(yīng)用效果分析
        5.7.1 系統(tǒng)安裝
        5.7.2 系統(tǒng)啟動(dòng)
        5.7.3 功能測(cè)試報(bào)告
        5.7.4 兼容性測(cè)試報(bào)告
        5.7.5 測(cè)試結(jié)果
    5.8 本章小結(jié)
結(jié)論
參考文獻(xiàn)
致謝


【參考文獻(xiàn)】：
期刊論文
[1]淺議云計(jì)算時(shí)代下GIS的發(fā)展[J]. 戴立乾,陳娜.  安徽農(nóng)業(yè)科學(xué). 2009(31)
[2]云計(jì)算:計(jì)算以外的安全性[J]. 木同.  互聯(lián)網(wǎng)天地. 2009(08)
[3]云計(jì)算對(duì)圖書(shū)館事業(yè)的雙重影響[J]. 肖鵬.  圖書(shū)館學(xué)研究. 2009(08)
[4]云計(jì)算給圖書(shū)館管理帶來(lái)挑戰(zhàn)[J]. 胡小菁,范并思.  大學(xué)圖書(shū)館學(xué)報(bào). 2009(04)
[5]云計(jì)算到底離企業(yè)有多遠(yuǎn)[J]. 王娟.  山西電教. 2009(02)
[6]云計(jì)算到底離企業(yè)有多遠(yuǎn)[J]. 王娟.  山西電教. 2009 (02)
[7]云計(jì)算改善數(shù)字圖書(shū)館用戶體驗(yàn)初探[J]. 周舒,張嵐嵐.  圖書(shū)館學(xué)研究. 2009(04)
[8]云計(jì)算技術(shù)在圖書(shū)館中的應(yīng)用探討[J]. 李永先,欒旭倫,李森森.  江西圖書(shū)館學(xué)刊. 2009(01)
[9]淺析云計(jì)算與信息安全[J]. 謝四江,馮雁.  北京電子科技學(xué)院學(xué)報(bào). 2008(04)



本文編號(hào)：3572800