發(fā)布時(shí)間：2020-07-14 22:28

【摘要】：隨著數(shù)字技術(shù)和互聯(lián)網(wǎng)的快速發(fā)展,互聯(lián)網(wǎng)提供的服務(wù)種類越來越多,需要處理的數(shù)據(jù)量也越大。如何處理好海量的數(shù)據(jù)與服務(wù),有效地為用戶提供方便、快捷的網(wǎng)絡(luò)服務(wù)日益重要。云計(jì)算的到來為解決海量數(shù)據(jù)問題提供了良好的途徑,它提供了安全可靠的數(shù)據(jù)存儲(chǔ)、方便快捷的互聯(lián)網(wǎng)服務(wù)和強(qiáng)大的計(jì)算能力,改變了傳統(tǒng)以PC機(jī)為基礎(chǔ)的生產(chǎn)模式,最終改變?nèi)藗儷@取信息。同時(shí),隨著云計(jì)算的推廣和流行,如何高速率、低成本儲(chǔ)存和管理生成于云端的大量數(shù)據(jù),也成為了各大企業(yè)和組織研究重點(diǎn),這就需要有良好的云結(jié)構(gòu)設(shè)計(jì)、數(shù)據(jù)存儲(chǔ)及處理模式和云存儲(chǔ)平臺(tái)的設(shè)計(jì) 目前的云計(jì)算平臺(tái)中的存儲(chǔ)設(shè)計(jì)主要有Google的GFS和Hadoop的HDFS。但是,在GFS和HDFS中在都存在節(jié)點(diǎn)失效的問題。節(jié)點(diǎn)失效將對云平臺(tái)帶來不利影響,尤其是服務(wù)器節(jié)點(diǎn)失效影響更大。因此解決單節(jié)點(diǎn)甚至雙節(jié)點(diǎn)同時(shí)實(shí)效成為一個(gè)重要的問題。 針對節(jié)點(diǎn)失效這個(gè)問題,本文擬采用云計(jì)算與P2P相結(jié)合的方式搭建架構(gòu)平臺(tái),即在存儲(chǔ)數(shù)據(jù)的節(jié)點(diǎn)之間與其子服務(wù)節(jié)點(diǎn)之間采用云計(jì)算方式存儲(chǔ),在服務(wù)節(jié)點(diǎn)之間采用全分布式非結(jié)構(gòu)化拓?fù)涫沟梅⻊?wù)節(jié)點(diǎn)S之間是完全對等的模式,也就是一種混合拓?fù)浣Y(jié)構(gòu)模式。采用全分布式非結(jié)構(gòu)化拓?fù)涞姆墙Y(jié)構(gòu)化系統(tǒng)中,出于冗余度以及延時(shí)的考慮,大部分DHT總是在節(jié)點(diǎn)的虛擬標(biāo)識(shí)與關(guān)鍵字最接近的節(jié)點(diǎn)上復(fù)制備份冗余信息,這樣也避免了單一節(jié)點(diǎn)失效的問題。這種混合拓?fù)浣Y(jié)構(gòu)模式可以有效的解決服務(wù)器節(jié)點(diǎn)失效的問題,構(gòu)建可信服務(wù)器節(jié)點(diǎn)的云計(jì)算基礎(chǔ)架構(gòu)。 同時(shí),由于云計(jì)算中心需要面對的應(yīng)用種類、數(shù)量和規(guī)模是前所未有的,所以應(yīng)用及用戶隔離技術(shù)是云計(jì)算中心需要考慮的問題。在隔離技術(shù)上數(shù)據(jù)的隔離是最為重要的,我們采用一種目錄映射的單向指針分層用戶隔離的方法以便于有效地實(shí)現(xiàn)了用戶數(shù)據(jù)的隔離。 接著,本文重點(diǎn)分析并給出云計(jì)算平臺(tái)中數(shù)據(jù)存儲(chǔ)方式,不同于關(guān)系數(shù)據(jù)庫的、適用于云計(jì)算的一種基于列模式的映射數(shù)據(jù)存儲(chǔ)模式,這種模式的數(shù)據(jù)表結(jié)構(gòu)它是一個(gè)稀疏的,分布的,持續(xù)多維度的排序映射數(shù)組。 最后,給出云存儲(chǔ)平臺(tái)設(shè)計(jì)的系統(tǒng)結(jié)構(gòu)和分布式存儲(chǔ)流程以及系統(tǒng)管理節(jié)點(diǎn)、子節(jié)點(diǎn)和客戶端節(jié)點(diǎn)的模塊設(shè)計(jì)
【學(xué)位授予單位】：廣東工業(yè)大學(xué)
【學(xué)位級別】：碩士
【學(xué)位授予年份】：2011
【分類號】：TP333
【圖文】：

150.0爵市場規(guī)模一沖增長率圖2一 12008年一2009年中國云計(jì)算市場規(guī)模及增長情況 FigureZ一 1The2008一 2009ChinaCloudCo一 nPutingMarketSizeandGrowthSituation2009年中國云計(jì)算市場產(chǎn)品結(jié)構(gòu)如圖2一2，SaaS占云計(jì)算市場規(guī)模的達(dá)87.8%，為354.2億;PaaS、IaaS分別占到云計(jì)算整體市場的n.8%和0.4%，分別為47.6億、 1.7億。IaaS1.7億元 0.4嘆PaaS47.6億圖2一22009年中國云計(jì)算市場產(chǎn)品結(jié)構(gòu) FigureZ一 22009CloudCo一nPuti一 19MarketProduetStruetureinChina2008年初，IBM與無錫市政府合作建立了無錫軟件園云計(jì)算中心，開始了云計(jì)算在中國的商業(yè)應(yīng)用。目前，無錫云計(jì)算中心現(xiàn)己成為業(yè)內(nèi)領(lǐng)先的云計(jì)算提供商，能夠貫穿PaaS(平臺(tái)即服務(wù))、SaaS(軟件即服務(wù))和IaaS(基礎(chǔ)架構(gòu)即服務(wù))，從這三個(gè)角度提供服務(wù)。從PaaS(平臺(tái)即服務(wù))角度出發(fā)

150.0爵市場規(guī)模一沖增長率圖2一 12008年一2009年中國云計(jì)算市場規(guī)模及增長情況 FigureZ一 1The2008一 2009ChinaCloudCo一 nPutingMarketSizeandGrowthSituation2009年中國云計(jì)算市場產(chǎn)品結(jié)構(gòu)如圖2一2，SaaS占云計(jì)算市場規(guī)模的達(dá)87.8%，為354.2億;PaaS、IaaS分別占到云計(jì)算整體市場的n.8%和0.4%，分別為47.6億、 1.7億。IaaS1.7億元 0.4嘆PaaS47.6億圖2一22009年中國云計(jì)算市場產(chǎn)品結(jié)構(gòu) FigureZ一 22009CloudCo一nPuti一 19MarketProduetStruetureinChina2008年初，IBM與無錫市政府合作建立了無錫軟件園云計(jì)算中心，開始了云計(jì)算在中國的商業(yè)應(yīng)用。目前，無錫云計(jì)算中心現(xiàn)己成為業(yè)內(nèi)領(lǐng)先的云計(jì)算提供商，能夠貫穿PaaS(平臺(tái)即服務(wù))、SaaS(軟件即服務(wù))和IaaS(基礎(chǔ)架構(gòu)即服務(wù))，從這三個(gè)角度提供服務(wù)。從PaaS(平臺(tái)即服務(wù))角度出發(fā)

圖2一6HOFs的體系結(jié)構(gòu) FigureZ一 6HadooPDistributedFileSystemArehitectureHDFS的體系結(jié)構(gòu)如圖2一6所示，從圖中可以看出，Namenode，Datanode，Client之間的通信都是建立在TCP/IP的基礎(chǔ)之上的。當(dāng)Client要執(zhí)行一個(gè)寫入的操作的時(shí)候，命令不是立刻就發(fā)送到Namenode，而是Client先在本機(jī)上臨時(shí)文件夾中暫時(shí)保存這些數(shù)據(jù)，臨時(shí)文件夾設(shè)有一定的B10ck的值，通常默認(rèn)是64M

【共引文獻(xiàn)】

相關(guān)期刊論文 前10條

1 韓毅;;P2P網(wǎng)絡(luò)信息檢索的研究進(jìn)展[J];現(xiàn)代圖書情報(bào)技術(shù);2007年07期

2 王剛;鄧微波;陳世福;王云;;一種基于Web Services的事務(wù)流中間件模型[J];成都信息工程學(xué)院學(xué)報(bào);2005年06期

3 何春;張?jiān)倨?張鷹;;P2P網(wǎng)絡(luò)技術(shù)的研究及應(yīng)用[J];電腦學(xué)習(xí);2006年05期

4 朱夏;王茜;;異構(gòu)系統(tǒng)間數(shù)據(jù)交換模型的設(shè)計(jì)與實(shí)現(xiàn)[J];東南大學(xué)學(xué)報(bào)(自然科學(xué)版);2006年02期

5 季一木;王汝傳;王海艷;;網(wǎng)格技術(shù)在電信中的應(yīng)用研究[J];電信科學(xué);2006年02期

6 劉紅文;;淺談Web Service技術(shù)[J];福建電腦;2007年03期

7 張晶;李佑鋼;楊建國;林報(bào)嘉;孫久虎;;治理車輛雙超智能管理信息平臺(tái)的研究及實(shí)現(xiàn)[J];公路交通科技;2007年06期

8 吳功和;劉真;;基于GIS Web Service的WebGIS應(yīng)用[J];華北水利水電學(xué)院學(xué)報(bào);2006年01期

9 金瑩,鄒立娣;一種支持Qos約束的Web服務(wù)模型框架及實(shí)現(xiàn)[J];合肥學(xué)院學(xué)報(bào)(自然科學(xué)版);2005年03期

10 尹向東;SOAP及在Web服務(wù)中的實(shí)現(xiàn)[J];湖南科技學(xué)院學(xué)報(bào);2005年11期

相關(guān)會(huì)議論文 前10條

1 陳彥萍;李增智;夏虹;朱海萍;;服務(wù)質(zhì)量驅(qū)動(dòng)的Web服務(wù)組合框架的設(shè)計(jì)與實(shí)現(xiàn)[A];2006年全國通信軟件學(xué)術(shù)會(huì)議論文集[C];2006年

2 李宏偉;李勤超;蔡暢;;基于OWL-S的地理信息服務(wù)語義描述研究[A];中國地理信息系統(tǒng)協(xié)會(huì)第四次會(huì)員代表大會(huì)暨第十一屆年會(huì)論文集[C];2007年

3 薛海麗;樊永生;韓燮;;下一代網(wǎng)絡(luò)結(jié)構(gòu)和關(guān)鍵技術(shù)分析[A];AECC專題學(xué)術(shù)研討會(huì)論文集[C];2007年

4 張艷梅;;基于Overlay網(wǎng)絡(luò)的服務(wù)組合研究綜述[A];2006北京地區(qū)高校研究生學(xué)術(shù)交流會(huì)——通信與信息技術(shù)會(huì)議論文集（上）[C];2006年

5 李丹;吳國新;金慶;;基于DRM的P2P系統(tǒng)版權(quán)管理研究[A];2006北京地區(qū)高校研究生學(xué)術(shù)交流會(huì)——通信與信息技術(shù)會(huì)議論文集（下）[C];2006年

6 吳家菊;劉剛;席傳裕;;Web服務(wù)數(shù)據(jù)的二次處理[A];第二屆全國信息與電子工程學(xué)術(shù)交流會(huì)暨第十三屆四川省電子學(xué)會(huì)曙光分會(huì)學(xué)術(shù)年會(huì)論文集[C];2006年

7 欒衡;張世棟;隋琪;;一種基于服務(wù)功能社區(qū)的規(guī)劃算法[A];2005年全國理論計(jì)算機(jī)科學(xué)學(xué)術(shù)年會(huì)論文集[C];2005年

8 薛慶;張世棟;隋琪;;一種基于服務(wù)關(guān)聯(lián)的Web服務(wù)發(fā)現(xiàn)算法[A];2005年全國理論計(jì)算機(jī)科學(xué)學(xué)術(shù)年會(huì)論文集[C];2005年

9 李躍軍;田田;馬軍;;Web服務(wù)發(fā)現(xiàn)技術(shù)的研究[A];2005年全國理論計(jì)算機(jī)科學(xué)學(xué)術(shù)年會(huì)論文集[C];2005年

10 劉興偉;崔曉紅;;UDDI的語義擴(kuò)展及分布式實(shí)現(xiàn)[A];2006年全國開放式分布與并行計(jì)算學(xué)術(shù)會(huì)議論文集（一）[C];2006年

相關(guān)博士學(xué)位論文 前10條

1 安楊;基于本體的網(wǎng)絡(luò)地理服務(wù)中的關(guān)鍵問題研究[D];武漢大學(xué);2005年

2 嚴(yán)亞蘭;基于語義Web的知識(shí)處理研究[D];武漢大學(xué);2005年

3 王平;大規(guī)模網(wǎng)絡(luò)蠕蟲檢測與傳播抑制[D];哈爾濱工業(yè)大學(xué);2006年

4 周娜;基于Web的制造業(yè)電子商務(wù)平臺(tái)關(guān)鍵技術(shù)的研究與應(yīng)用[D];南京航空航天大學(xué);2005年

5 唐宇;空間信息柵格（SIG）系統(tǒng)框架、服務(wù)體系與服務(wù)聚合技術(shù)研究[D];國防科學(xué)技術(shù)大學(xué);2004年

6 張霞;地理信息服務(wù)組合與空間分析服務(wù)研究[D];武漢大學(xué);2004年

7 南凱;面向關(guān)系型數(shù)據(jù)共享的數(shù)據(jù)網(wǎng)格中間件研究[D];中國科學(xué)院研究生院（計(jì)算技術(shù)研究所）;2006年

8 房俊;支持最終用戶編程的服務(wù)虛擬化方法研究[D];中國科學(xué)院研究生院（計(jì)算技術(shù)研究所）;2006年

9 張程;面向服務(wù)環(huán)境中服務(wù)的個(gè)性化推薦[D];中國科學(xué)院研究生院（計(jì)算技術(shù)研究所）;2006年

10 陳犖;分布式地理空間數(shù)據(jù)服務(wù)集成技術(shù)研究[D];國防科學(xué)技術(shù)大學(xué);2005年

相關(guān)碩士學(xué)位論文 前10條

1 雷剛躍;基于Web服務(wù)的開放實(shí)驗(yàn)室綜合信息處理平臺(tái)及關(guān)鍵技術(shù)研究[D];中南大學(xué);2005年

2 王任;面向校園網(wǎng)的信息資源共享方案的研究[D];湖南大學(xué);2006年

3 張彥軍;基于分布式對等網(wǎng)的教育資源系統(tǒng)研究[D];暨南大學(xué);2006年

4 徐越;具有信任評價(jià)機(jī)制的CMS系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];蘭州大學(xué);2007年

5 鄭恒青;數(shù)字版權(quán)系統(tǒng)中P2P分發(fā)機(jī)制的研究與設(shè)計(jì)[D];汕頭大學(xué);2007年

6 歐陽純萍;實(shí)施面向服務(wù)體系結(jié)構(gòu)（SOA）關(guān)鍵技術(shù)的研究[D];廣西大學(xué);2007年

7 陳志英;基于BPEL4WS的業(yè)務(wù)流程設(shè)計(jì)方法的研究[D];武漢理工大學(xué);2007年

8 吳燕;基于XMPP協(xié)議的P2P即時(shí)通訊軟件設(shè)計(jì)[D];浙江大學(xué);2007年

9 梁慧芝;學(xué)習(xí)資源庫知識(shí)服務(wù)模型研究[D];西南師范大學(xué);2005年

10 陳皓;電力設(shè)備狀態(tài)檢修輔助分析系統(tǒng)的研究與實(shí)現(xiàn)[D];西安理工大學(xué);2005年

本文編號：2755577