本文關(guān)鍵詞： OpenStack Swift 云存儲(chǔ) 大文件 存儲(chǔ)方案　出處：《計(jì)算機(jī)工程與設(shè)計(jì)》2015年02期 　論文類型：期刊論文

【摘要】：為解決開源云平臺(tái)OpenStack的對(duì)象存儲(chǔ)服務(wù)Swift在存儲(chǔ)GB級(jí)大文件方面的不足,提出基于文件分割、片段合并、并行處理的GB級(jí)大文件的存儲(chǔ)方案。分析Swift體系結(jié)構(gòu)及其特點(diǎn),在此基礎(chǔ)上構(gòu)建云存儲(chǔ)系統(tǒng)的層次架構(gòu);制定GB級(jí)大文件的存儲(chǔ)策略,設(shè)計(jì)關(guān)鍵數(shù)據(jù)結(jié)構(gòu)和上傳下載的核心流程,使用Java多線程實(shí)現(xiàn)該方案。部署云存儲(chǔ)實(shí)驗(yàn)環(huán)境,通過(guò)實(shí)驗(yàn)驗(yàn)證了該方案的可行性,該方案突破了Swift對(duì)文件大小的限制,提高了文件的上傳和下載速度。
[Abstract]:In order to solve the problem of object storage service (Swift) in open source cloud platform (OpenStack) in storing large files of GB level, file segmentation and fragment merging are proposed. The storage scheme of large files of GB level in parallel processing. The Swift architecture and its characteristics are analyzed, and then the hierarchical architecture of cloud storage system is constructed. The key data structure and the core process of uploading and downloading are designed. The scheme is implemented by Java multithreading. The cloud storage experimental environment is deployed. The feasibility of the scheme is verified by experiments. The scheme breaks through the limitation of Swift on file size and improves the speed of uploading and downloading files.
【作者單位】： 北京工業(yè)大學(xué)計(jì)算機(jī)學(xué)院;
【分類號(hào)】：TP333
【正文快照】： 0引言目前面對(duì)海量數(shù)據(jù)的存儲(chǔ)需求,傳統(tǒng)的數(shù)據(jù)存儲(chǔ)方案在存儲(chǔ)容量、數(shù)據(jù)的可靠性、存儲(chǔ)成本等方向存在很大的不足。云存儲(chǔ)[1,2]具有自身獨(dú)特的優(yōu)勢(shì),可以動(dòng)態(tài)、靈活地進(jìn)行擴(kuò)展和配置,使用戶可以通過(guò)網(wǎng)絡(luò)按需獲得云存儲(chǔ)的軟硬件資源。OpenStack[3,4]是一個(gè)開源的云計(jì)算平臺(tái),它的

【參考文獻(xiàn)】

相關(guān)期刊論文 前2條

1 曾文英;趙躍龍;尚敏;;云計(jì)算及云存儲(chǔ)生態(tài)系統(tǒng)研究[J];計(jì)算機(jī)研究與發(fā)展;2011年S1期

2 蔣溢;孫雪濤;楊川;;Swift云存儲(chǔ)環(huán)境下基于I/O負(fù)載均衡的讀取策略[J];計(jì)算機(jī)工程與設(shè)計(jì);2013年09期

【共引文獻(xiàn)】

相關(guān)期刊論文 前10條

1 從立鋼;郭利菊;;云存儲(chǔ)系統(tǒng)安全技術(shù)研究[J];長(zhǎng)春理工大學(xué)學(xué)報(bào)(自然科學(xué)版);2014年03期

2 費(fèi)賢舉;王樹鋒;王文;;一種海量大數(shù)據(jù)云存儲(chǔ)系統(tǒng)框架設(shè)計(jì)[J];常州工學(xué)院學(xué)報(bào);2014年03期

3 趙穎;;云計(jì)算及云儲(chǔ)存生態(tài)系統(tǒng)研究[J];太原城市職業(yè)技術(shù)學(xué)院學(xué)報(bào);2014年08期

4 王治中;張慶君;呂科;;大數(shù)據(jù)時(shí)代航天遙感系統(tǒng)的挑戰(zhàn)和機(jī)遇[J];工程研究-跨學(xué)科視野中的工程;2014年03期

5 琚忠云;周濤;李精精;肖澤軍;;云計(jì)算在核安全分析中的應(yīng)用研究[J];工業(yè)安全與環(huán)保;2014年10期

6 郝亮;崔剛;曲明成;柯文德;;云計(jì)算能耗資源調(diào)度優(yōu)化關(guān)鍵技術(shù)研究[J];智能計(jì)算機(jī)與應(yīng)用;2014年05期

7 吳秋萍;;推動(dòng)云計(jì)算生態(tài)系統(tǒng)發(fā)展研究——以廣佛肇一體化為例[J];電腦知識(shí)與技術(shù);2014年31期

8 楊金鳳;;云時(shí)代背景下IT企業(yè)的戰(zhàn)略選擇研究[J];中國(guó)管理信息化;2015年04期

9 趙偉;卓偉;李占波;王志華;;基于云計(jì)算的一種新的數(shù)據(jù)交換架構(gòu)[J];計(jì)算機(jī)工程與科學(xué);2013年08期

10 陳聯(lián)誠(chéng);胡月明;張飛揚(yáng);段文杰;余平祥;;農(nóng)產(chǎn)品安全追溯系統(tǒng)的云計(jì)算技術(shù)性能提升設(shè)計(jì)[J];農(nóng)業(yè)工程學(xué)報(bào);2013年24期

相關(guān)會(huì)議論文 前2條

1 Gang Zhao;Chen LiJuan;Ye QiuXu;;Applied Research of Cloud Computing on the Sharing of Educational Information Resource[A];2013年教育技術(shù)與管理科學(xué)國(guó)際會(huì)議論文集[C];2013年

2 張峰;李基亮;;校園私有云存儲(chǔ)方案與探索[A];中國(guó)高等教育學(xué)會(huì)教育信息化分會(huì)第十二次學(xué)術(shù)年會(huì)論文集[C];2014年

相關(guān)博士學(xué)位論文 前2條

1 姜春茂;基于移動(dòng)P2P的分布式存儲(chǔ)和傳輸機(jī)制研究[D];哈爾濱工程大學(xué);2013年

2 夏純中;云存儲(chǔ)多數(shù)據(jù)中心QoS保障機(jī)制研究[D];江蘇大學(xué);2014年

相關(guān)碩士學(xué)位論文 前10條

1 葉嬌;云計(jì)算技術(shù)在農(nóng)業(yè)信息共享服務(wù)中的研究與應(yīng)用[D];吉林農(nóng)業(yè)大學(xué);2013年

2 熊智;基于XCP云平臺(tái)的I/O監(jiān)控的研究與實(shí)現(xiàn)[D];華南理工大學(xué);2013年

3 李寧寧;云計(jì)算環(huán)境中虛擬機(jī)增量遷移技術(shù)的研究[D];電子科技大學(xué);2013年

4 馮黎明;云環(huán)境下無(wú)線傳感器網(wǎng)絡(luò)服務(wù)研究[D];南京師范大學(xué);2013年

5 賈玉輝;面向語(yǔ)音交互的云計(jì)算系統(tǒng)的研究[D];中國(guó)海洋大學(xué);2013年

6 韓博聞;云計(jì)算運(yùn)維平臺(tái)服務(wù)控制子系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];哈爾濱工業(yè)大學(xué);2013年

7 陳欣;云計(jì)算環(huán)境中虛擬化技術(shù)的研究與實(shí)踐[D];北京工業(yè)大學(xué);2013年

8 黃彩鋒;基于HDFS分布式并行文件系統(tǒng)副本策略研究[D];浙江師范大學(xué);2013年

9 雷棠棣;企業(yè)級(jí)MapReduce系統(tǒng)失效恢復(fù)機(jī)制的設(shè)計(jì)與實(shí)現(xiàn)[D];哈爾濱工業(yè)大學(xué);2012年

10 肖磊;基于云計(jì)算的移動(dòng)商務(wù)研究與實(shí)現(xiàn)[D];南昌航空大學(xué);2013年

【二級(jí)參考文獻(xiàn)】

相關(guān)期刊論文 前1條

1 田冠華;孟丹;詹劍鋒;;云計(jì)算環(huán)境下基于失效規(guī)則的資源動(dòng)態(tài)提供策略[J];計(jì)算機(jī)學(xué)報(bào);2010年10期

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 ;上海信天喜獲華東首份SWIFT客戶合同[J];通信世界;2004年04期

2 劉春燕;;SWIFT促進(jìn)業(yè)務(wù)標(biāo)準(zhǔn)化和自動(dòng)化[J];金融電子化;2006年02期

3 沈國(guó)華;;SWIFT在我國(guó)商業(yè)銀行的應(yīng)用及其前景[J];電腦與電信;2007年02期

4 袁俊德;高國(guó)奇;李躍華;;SWIFT的基本架構(gòu)與技術(shù)發(fā)展[J];中國(guó)金融電腦;2007年05期

5 楊士華;;SWIFT在中國(guó)的發(fā)展和應(yīng)用[J];金融電子化;2008年10期

6 李赫;;SWIFT與東亞的合作及啟示[J];華南金融電腦;2008年05期

7 毛翔昊;;中國(guó)農(nóng)業(yè)發(fā)展銀行SWIFT系統(tǒng)升級(jí)實(shí)錄[J];中國(guó)金融電腦;2012年08期

8 ;SHENZHEN POST IN SWIFT DEVELOPMENT[J];中國(guó)郵政;1988年01期

9 楊英;Swift系統(tǒng)[J];管理科學(xué)文摘;1995年06期

10 張卓其;國(guó)際環(huán)球同業(yè)財(cái)務(wù)電信系統(tǒng)SWIFT[J];信息系統(tǒng)工程;1997年09期

相關(guān)會(huì)議論文 前4條

1 林一清;;Swift/BAT observations for X-ray flashes[A];中國(guó)天文學(xué)會(huì)2007年學(xué)術(shù)年會(huì)論文集[C];2007年

2 孫峻峭;;青海中行SWIFT應(yīng)用及安全[A];第十一屆全國(guó)計(jì)算機(jī)安全技術(shù)交流會(huì)論文集[C];1996年

3 張峰;李基亮;;校園私有云存儲(chǔ)方案與探索[A];中國(guó)高等教育學(xué)會(huì)教育信息化分會(huì)第十二次學(xué)術(shù)年會(huì)論文集[C];2014年

4 何友文;;強(qiáng)流星雨及其電離效應(yīng)觀測(cè)與研究[A];1998年中國(guó)地球物理學(xué)會(huì)第十四屆學(xué)術(shù)年會(huì)論文集[C];1998年

相關(guān)重要報(bào)紙文章 前10條

1 河南 韓欲青;Swift 3D讓平面動(dòng)起來(lái)[N];中國(guó)電腦教育報(bào);2001年

2 記者 潘曉娟;SWIFT合作伙伴計(jì)劃助推中國(guó)金融設(shè)施建設(shè)[N];中國(guó)經(jīng)濟(jì)導(dǎo)報(bào);2007年

3 張?zhí)┬?SWIFT助力金融交易處理平臺(tái)[N];中國(guó)證券報(bào);2007年

4 袁媛邋謝曉冬;中行成為內(nèi)地首家SWIFT組織成員[N];上海證券報(bào);2007年

5 雋文;SWIFT將促進(jìn)中國(guó)金融市場(chǎng)協(xié)調(diào)發(fā)展[N];中國(guó)經(jīng)濟(jì)導(dǎo)報(bào);2008年

6 維德;上海信天獲華東首份SWIFT客戶合同[N];中國(guó)電子報(bào);2004年

7 魏建玲邋張娜;SWIFT促進(jìn)中國(guó)金融市場(chǎng)協(xié)調(diào)發(fā)展[N];國(guó)際商報(bào);2008年

8 曾婭;上海信天喜獲華東首份SWIFT客戶合同[N];人民郵電;2004年

9 記者 潘曉娟;向中國(guó)銀行提供標(biāo)準(zhǔn)化的服務(wù)[N];中國(guó)經(jīng)濟(jì)導(dǎo)報(bào);2006年

10 記者 潘曉娟;借助SWIFT：中國(guó)銀行力促中國(guó)貿(mào)易發(fā)展[N];中國(guó)經(jīng)濟(jì)導(dǎo)報(bào);2007年

相關(guān)博士學(xué)位論文 前1條

1 俞云偉;Swift時(shí)代伽瑪射線暴及其余輝的多波段研究[D];華中師范大學(xué);2009年

相關(guān)碩士學(xué)位論文 前2條

1 畢曉宇;商業(yè)銀行SWIFT系統(tǒng)接入及實(shí)現(xiàn)[D];電子科技大學(xué);2005年

2 付世平;基于Swift的教育資源共享平臺(tái)的設(shè)計(jì)與實(shí)現(xiàn)[D];西安電子科技大學(xué);2014年

，

本文編號(hào)：1473255