隨著信息技術(shù)和網(wǎng)絡(luò)技術(shù)的高速發(fā)展，互聯(lián)網(wǎng)已經(jīng)邁入了“Web2.0時(shí)代”�！癢eb2.0時(shí)代”的互聯(lián)網(wǎng)朝著更加智能化、個(gè)性化和社會(huì)化的方向發(fā)展，影響并改變著人們的生活方式，其中最典型的例子便是社交網(wǎng)絡(luò)（SNS，Social Networking Services）。由于社交網(wǎng)絡(luò)擁有龐大的用戶群體，并且用戶頻繁地更新微博，造成社交網(wǎng)絡(luò)每天都會(huì)產(chǎn)生大量的用戶數(shù)據(jù)。如何從這些用戶數(shù)據(jù)中發(fā)現(xiàn)深層次的有用信息，并據(jù)此為用戶提供個(gè)性化的服務(wù)推薦成為社交網(wǎng)絡(luò)重點(diǎn)關(guān)注的方向。但是，社交網(wǎng)絡(luò)產(chǎn)生的往往都是超大規(guī)模的數(shù)據(jù)集，如何處理這種大規(guī)模的數(shù)據(jù)集成為一個(gè)較為嚴(yán)峻的挑戰(zhàn)。Hadoop是Google云計(jì)算平臺(tái)的開(kāi)源實(shí)現(xiàn)，它是一個(gè)能夠?qū)Υ罅繑?shù)據(jù)進(jìn)行分布式處理的軟件框架，具有高效性、高可靠性、高可伸縮性、經(jīng)濟(jì)廉價(jià)性等諸多優(yōu)點(diǎn)，在工業(yè)界和學(xué)術(shù)界得到廣泛應(yīng)用。為了能夠高效地處理海量數(shù)據(jù)，并保證可擴(kuò)展性，利用一個(gè)分布式平臺(tái)實(shí)現(xiàn)社交網(wǎng)絡(luò)服務(wù)推薦算法是不二選擇。鑒于Hadoop固有的大規(guī)模數(shù)據(jù)存儲(chǔ)和處理能力可以有效地解決海量數(shù)據(jù)的安全存儲(chǔ)和高效處理難題，同時(shí)可以保證數(shù)據(jù)的可靠性、有效性和安全性，本文提出在Hadoop云平... 

【文章來(lái)源】：吉林大學(xué)吉林省 211工程院校 985工程院校 教育部直屬院校

【文章頁(yè)數(shù)】：65 頁(yè)

【學(xué)位級(jí)別】：碩士

【部分圖文】：

中國(guó)社交網(wǎng)絡(luò)的市場(chǎng)規(guī)模和發(fā)展趨勢(shì)

[45]。Hadoop有多種元素構(gòu)成（如圖3.1），本文中主要用到HDFS（Hadoop Distributed File System）、并行編程模型MapReduce和分布式數(shù)據(jù)庫(kù)HBase，下面將分別進(jìn)行介紹。3.1 分布式文件系統(tǒng) HDFSHDFS是Hadoop的文件系統(tǒng)，用于可靠地存儲(chǔ)海量的數(shù)據(jù)集。HDFS是主從式的系統(tǒng)架構(gòu)，一個(gè)集群由一個(gè)NameNode節(jié)點(diǎn)和多個(gè)DataNode節(jié)點(diǎn)組成。HDFS將元數(shù)據(jù)和應(yīng)用數(shù)據(jù)分開(kāi)存儲(chǔ)[46]，其中，元數(shù)據(jù)由NameNode節(jié)點(diǎn)管理，實(shí)際應(yīng)用數(shù)據(jù)存儲(chǔ)在DataNode節(jié)點(diǎn)中�？蛻舳藦腘ameNode節(jié)點(diǎn)獲得文件的元數(shù)據(jù)，然后找到存儲(chǔ)應(yīng)用數(shù)據(jù)的DataNode節(jié)點(diǎn)直接交互。NameNode是一個(gè)集群中的主控服務(wù)器

相關(guān)的研究，其中，文獻(xiàn)[50-52]在MapReduce上進(jìn)行社交網(wǎng)絡(luò)數(shù)據(jù)分析，文獻(xiàn)[53]在Hadoop平臺(tái)上實(shí)現(xiàn)了基于用戶的協(xié)同過(guò)濾推薦算法。借鑒以上的研究基礎(chǔ)，本論文在開(kāi)源云平臺(tái)Hadoop上進(jìn)行社交網(wǎng)絡(luò)服務(wù)推薦的研究，其系統(tǒng)框架如圖4.1所示，該系統(tǒng)主要包括數(shù)據(jù)采集模塊、數(shù)據(jù)預(yù)處理模塊、數(shù)據(jù)存儲(chǔ)模塊和服務(wù)推薦模塊四部分。

【參考文獻(xiàn)】：
博士論文
[1]商務(wù)推薦系統(tǒng)的設(shè)計(jì)研究[D]. 王宏宇.中國(guó)科學(xué)技術(shù)大學(xué) 2007

碩士論文
[1]社會(huì)網(wǎng)絡(luò)分析工具中的分布式最小生成樹(shù)算法[D]. 楊寅.北京郵電大學(xué) 2011
[2]中文關(guān)鍵詞提取技術(shù)[D]. 梁偉明.上海交通大學(xué) 2010



本文編號(hào)：3402835