【摘要】：針對HDFS采用的完全復(fù)制存儲方案會占據(jù)較多的存儲空間,且對數(shù)據(jù)的惡意竊取和攻擊缺少防御措施,提出了基于分片聚合編碼的HDFS數(shù)據(jù)存儲策略,其中采用STAR碼對數(shù)據(jù)進(jìn)行編碼處理,產(chǎn)生編碼數(shù)據(jù)片,然后通過聚合操作將每個數(shù)據(jù)段中位置相同的數(shù)據(jù)片聚合組成一個存儲數(shù)據(jù)塊,實(shí)現(xiàn)了HDFS文件的存儲.模擬實(shí)驗(yàn)表明基于分片聚合編碼的文件存儲策略相比原HDFS存儲方案在數(shù)據(jù)分布方面更安全有效.

【參考文獻(xiàn)】

相關(guān)期刊論文 前2條

1 王意潔;孫偉東;周松;裴曉強(qiáng);李小勇;;云計(jì)算環(huán)境下的分布存儲關(guān)鍵技術(shù)[J];軟件學(xué)報(bào);2012年04期

2 余林琛;章巍;林強(qiáng);許杰星;鐘貝;;RS糾刪碼在云存儲中的應(yīng)用[J];微電子學(xué)與計(jì)算機(jī);2011年08期

【共引文獻(xiàn)】

相關(guān)期刊論文 前10條

1 鐘德榮;蔣園園;張愷樂;王智泉;;基于云計(jì)算的全球眼視頻監(jiān)控系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[J];計(jì)算機(jī)光盤軟件與應(yīng)用;2012年20期

2 宋秀麗;陳龍;肖敏;;云存儲中支持XOR旋轉(zhuǎn)編碼的可恢復(fù)性驗(yàn)證方案[J];重慶郵電大學(xué)學(xué)報(bào)(自然科學(xué)版);2012年06期

3 王永;李敏;張勤;;云計(jì)算模式下合同協(xié)同擬定模型研究[J];重慶郵電大學(xué)學(xué)報(bào)(自然科學(xué)版);2012年06期

4 陳崇成;林劍峰;吳小竹;巫建偉;連惠群;;基于NoSQL的海量空間數(shù)據(jù)云存儲與服務(wù)方法[J];地球信息科學(xué)學(xué)報(bào);2013年02期

5 饒慶云;丁晶晶;蘇樂樂;谷永權(quán);夏良暉;胡中南;;基于云計(jì)算的分布式切圖服務(wù)設(shè)計(jì)與實(shí)現(xiàn)[J];測繪與空間地理信息;2013年S1期

6 范真榮;;基于云計(jì)算的企業(yè)XBRL跨平臺協(xié)同管理研究[J];財(cái)會通訊;2013年25期

7 郭翠云;;云計(jì)算環(huán)境下的分布存儲關(guān)鍵技術(shù)分析[J];硅谷;2013年16期

8 萬武南;王拓;索望;;一種三容錯數(shù)據(jù)布局[J];電子與信息學(xué)報(bào);2013年10期

9 陶衛(wèi)東;;“警務(wù)云”模式與網(wǎng)絡(luò)安全決策支持系統(tǒng)[J];遼寧警專學(xué)報(bào);2013年02期

10 王麗;林恩愛;王欣;;自動精簡配置存儲技術(shù)在民航信息系統(tǒng)中的應(yīng)用[J];計(jì)算機(jī)與現(xiàn)代化;2013年03期

相關(guān)會議論文 前2條

1 司煒;;IT支撐系統(tǒng)云計(jì)算資源池實(shí)現(xiàn)研究[A];2013年中國通信學(xué)會信息通信網(wǎng)絡(luò)技術(shù)委員會年會論文集[C];2013年

2 陳玉龍;王丹平;方曉群;;工業(yè)視頻監(jiān)控系統(tǒng)在豐山銅礦的應(yīng)用和發(fā)展[A];第三屆全國數(shù)字礦山高新技術(shù)成果交流會論文集[C];2014年

相關(guān)博士學(xué)位論文 前5條

1 陳震;黑龍江省森工林區(qū)“智慧林業(yè)”框架應(yīng)用技術(shù)研究[D];東北林業(yè)大學(xué);2012年

2 肖宜龍;隨機(jī)化數(shù)據(jù)冗余方法及其在存儲系統(tǒng)中的應(yīng)用[D];電子科技大學(xué);2013年

3 蔣海波;海量數(shù)據(jù)存儲系統(tǒng)的高可靠性關(guān)鍵技術(shù)研究與應(yīng)用[D];電子科技大學(xué);2013年

4 黃震;大規(guī)模分布式存儲系統(tǒng)中數(shù)據(jù)冗余技術(shù)研究[D];國防科學(xué)技術(shù)大學(xué);2012年

5 夏純中;云存儲多數(shù)據(jù)中心QoS保障機(jī)制研究[D];江蘇大學(xué);2014年

相關(guān)碩士學(xué)位論文 前10條

1 魏偉;一種基于laaS的模式的管理系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];復(fù)旦大學(xué);2012年

2 孫春菊;云環(huán)境下數(shù)據(jù)模型和索引技術(shù)研究[D];南京郵電大學(xué);2013年

3 田怡萌;BlueOcean海量存儲系統(tǒng)Windows客戶端設(shè)計(jì)與實(shí)現(xiàn)[D];上海交通大學(xué);2013年

4 方旋;云計(jì)算在土地利用規(guī)劃信息系統(tǒng)中的應(yīng)用研究[D];浙江大學(xué);2013年

5 田曉艷;云環(huán)境下高考視頻監(jiān)控?cái)?shù)據(jù)管理技術(shù)研究[D];山東師范大學(xué);2013年

6 吳永發(fā);面向終端應(yīng)用的云存儲系統(tǒng)研究與設(shè)計(jì)[D];廣東工業(yè)大學(xué);2013年

7 諶侃;用戶數(shù)據(jù)融合云計(jì)算存儲方案研究[D];北京郵電大學(xué);2013年

8 許維龍;基于HDFS的數(shù)據(jù)備份系統(tǒng)的分析與設(shè)計(jì)[D];北京郵電大學(xué);2013年

9 段長強(qiáng);基于PaaS云服務(wù)的移動互聯(lián)網(wǎng)應(yīng)用程序設(shè)計(jì)與實(shí)現(xiàn)[D];北京郵電大學(xué);2013年

10 趙曉冰;Hadoop平臺下的作業(yè)調(diào)度算法的研究[D];鄭州大學(xué);2013年

【二級參考文獻(xiàn)】

相關(guān)期刊論文 前1條

1 陳康;鄭緯民;;云計(jì)算:系統(tǒng)實(shí)例與研究現(xiàn)狀[J];軟件學(xué)報(bào);2009年05期

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 王朝陽;互聯(lián)網(wǎng)圖像格式的第三把劍PNG[J];電子出版;2002年08期

2 張曉林;文獻(xiàn)信息系統(tǒng)實(shí)現(xiàn)聯(lián)想式檢索的技術(shù)與方法[J];情報(bào)學(xué)報(bào);1994年05期

3 林鐵生,富致超;在EPROM上固化函數(shù)數(shù)據(jù)的方法[J];電測與儀表;1990年12期

4 王旭，，桂業(yè)英;．FLI文件格式及應(yīng)用[J];計(jì)算機(jī)應(yīng)用研究;1994年06期

5 揚(yáng)帆;駕馭MS-Windows圖像文件(四)[J];電腦愛好者;1997年10期

6 ;TEMS INVESTIGATION功能介紹及使用技巧(四)[J];通訊世界;2003年12期

7 符光寶;Oracle developer2000應(yīng)用技巧[J];華南熱帶農(nóng)業(yè)大學(xué)學(xué)報(bào);2002年04期

8 ;330bit多功能非接觸式辯識器件T5557[J];金卡工程;2004年03期

9 ;服務(wù)器的存儲技術(shù)[J];互聯(lián)網(wǎng)周刊;2000年29期

10 邵新;張陽;鄭萍;;Oracle中數(shù)據(jù)文件壞塊的驗(yàn)證與處理[J];醫(yī)療衛(wèi)生裝備;2010年09期

相關(guān)會議論文 前10條

1 朱旭東;柯劍;那文武;許魯;;一種數(shù)據(jù)塊關(guān)系指導(dǎo)的緩存替換方法[A];第15屆全國信息存儲技術(shù)學(xué)術(shù)會議論文集[C];2008年

2 李明;王林旭;謝劍薇;李東岳;;大規(guī)模地理數(shù)據(jù)的組織存儲及快速訪問[A];2010年全國通信安全學(xué)術(shù)會議論文集[C];2010年

3 崔鐵軍;張利;;多尺度海量柵格數(shù)據(jù)索引機(jī)制的研究[A];中國地理信息系統(tǒng)協(xié)會第八屆年會論文集[C];2004年

4 張兵;;Oracle Forms表格數(shù)據(jù)轉(zhuǎn)存為Excel文件的技巧研究[A];全國冶金自動化信息網(wǎng)2009年會論文集[C];2009年

5 鄭霄;陳紅;杜曉勇;王珊;;基于語義數(shù)據(jù)塊的兩層緩存技術(shù)在并行數(shù)據(jù)倉庫系統(tǒng)ParaWare中的實(shí)現(xiàn)[A];第十八屆全國數(shù)據(jù)庫學(xué)術(shù)會議論文集（研究報(bào)告篇）[C];2001年

6 楊啟軍;;邯鋼冷軋廠酸軋生產(chǎn)線的S7-COM通信[A];冶金軋制過程自動化技術(shù)交流會論文集[C];2005年

7 王國松;周建強(qiáng);程利平;張躍龍;;基于BLOB存取的大壩監(jiān)測電子文檔管理系統(tǒng)[A];全國大壩安全監(jiān)測技術(shù)信息網(wǎng)2008年度技術(shù)信息交流會暨全國大壩安全監(jiān)測技術(shù)應(yīng)用和發(fā)展研討會論文集[C];2008年

8 魏春城;;流媒體服務(wù)器設(shè)計(jì)中關(guān)鍵技術(shù)分析[A];第六屆全國計(jì)算機(jī)應(yīng)用聯(lián)合學(xué)術(shù)會議論文集[C];2002年

9 白冰;王寶生;陳琳;勞仲安;;一種前向糾錯編解碼的帶寬優(yōu)化方法[A];中國電子學(xué)會第十六屆信息論學(xué)術(shù)年會論文集[C];2009年

10 蔡平;;磁盤陣列的數(shù)據(jù)安全隱患與數(shù)據(jù)修復(fù)[A];第二十一次全國計(jì)算機(jī)安全學(xué)術(shù)交流會論文集[C];2006年

相關(guān)重要報(bào)紙文章 前10條

1 匡紅慶 周朝暉;軟件項(xiàng)目管理的質(zhì)量保證[N];人民政協(xié)報(bào);2005年

2 計(jì)算機(jī)世界實(shí)驗(yàn)室 韓勖;中小企業(yè)存儲之道[N];計(jì)算機(jī)世界;2007年

3 ;“不聯(lián)網(wǎng)搜索”新概念[N];網(wǎng)絡(luò)世界;2006年

4 美國飛康軟件公司中國區(qū)技術(shù)總監(jiān) 顏軍;飛康:單實(shí)例存儲實(shí)現(xiàn)快速恢復(fù)[N];中國計(jì)算機(jī)報(bào);2007年

5 漢帆(杭州)信息技術(shù)有限公司 楊洋;數(shù)據(jù)縮減：減少歸檔數(shù)據(jù)量[N];中國計(jì)算機(jī)報(bào);2008年

6 李宏;存儲與交換融合[N];中國計(jì)算機(jī)報(bào);2001年

7 羅慶超;VxFS中的檢查點(diǎn)和快照技術(shù)[N];中國計(jì)算機(jī)報(bào);2007年

8 昆騰公司;提供災(zāi)難恢復(fù)保護(hù)的遠(yuǎn)程復(fù)制[N];中國計(jì)算機(jī)報(bào);2007年

9 中國傳媒大學(xué)計(jì)算機(jī)學(xué)院 朱立谷;重復(fù)數(shù)據(jù)刪除技術(shù)解析[N];中國計(jì)算機(jī)報(bào);2007年

10 本報(bào)記者 張群英;左手，右手[N];網(wǎng)絡(luò)世界;2005年

相關(guān)博士學(xué)位論文 前10條

1 黃震;大規(guī)模分布式存儲系統(tǒng)中數(shù)據(jù)冗余技術(shù)研究[D];國防科學(xué)技術(shù)大學(xué);2012年

2 趙鑫;P2P流媒體內(nèi)容分發(fā)的關(guān)鍵技術(shù)研究[D];北京郵電大學(xué);2010年

3 歐陽一鳴;片上網(wǎng)絡(luò)測試關(guān)鍵問題研究[D];合肥工業(yè)大學(xué);2013年

4 涂旭平;對等流媒體直播系統(tǒng)帶寬資源優(yōu)化研究[D];華中科技大學(xué);2008年

5 馬冠駿;基于網(wǎng)絡(luò)編碼的P2P文件分發(fā)的研究[D];中國科學(xué)技術(shù)大學(xué);2009年

6 張慧杰;面向大數(shù)據(jù)集的地形模型多分辨率建模關(guān)鍵技術(shù)研究[D];吉林大學(xué);2009年

7 徐奎;無線網(wǎng)絡(luò)下的網(wǎng)絡(luò)編碼技術(shù)研究[D];華中科技大學(xué);2009年

8 王見;異構(gòu)節(jié)點(diǎn)的媒體分發(fā)系統(tǒng)研究[D];上海交通大學(xué);2009年

9 王洪體;數(shù)字地震儀網(wǎng)絡(luò)化與智能化技術(shù)研究[D];中國地震局地球物理研究所;2006年

10 杜曄華;嵌入式系統(tǒng)中閃速存儲器系統(tǒng)的若干節(jié)能技術(shù)研究[D];浙江大學(xué);2007年

相關(guān)碩士學(xué)位論文 前10條

1 馮本明;云存儲中數(shù)據(jù)塊資源分布及服務(wù)器效能優(yōu)化問題研究[D];湖南大學(xué);2011年

2 王s

本文編號：2570431