【摘要】：互聯(lián)網(wǎng)進(jìn)入web2.0時(shí)代之后,互聯(lián)網(wǎng)內(nèi)容從由網(wǎng)站產(chǎn)生轉(zhuǎn)變?yōu)橛捎脩糁鲗?dǎo)產(chǎn)生。隨著互聯(lián)網(wǎng)用戶基數(shù)不斷增加,互聯(lián)網(wǎng)計(jì)算和儲(chǔ)存規(guī)模也日益擴(kuò)大,單臺(tái)的服務(wù)器早已不能夠勝任高吞吐率、高并發(fā)、高可靠的要求,分布式計(jì)算應(yīng)運(yùn)而生。分布式系統(tǒng)采用分而治之的思想,將總存儲(chǔ)和計(jì)算量分布到多臺(tái)服務(wù)器上,使得整個(gè)系統(tǒng)能夠獲得更高的性能。如今,具備一定規(guī)模的公司都在研究并實(shí)施分布式方案,以求在保證高性能的前提下,節(jié)約成本。分布式的圖片服務(wù)伴隨著互聯(lián)網(wǎng)的發(fā)展而出現(xiàn)。大型的社交網(wǎng)絡(luò)如Facebook、騰訊,大型的電商平臺(tái)如淘寶、京東,以及其他大型的在線相冊(cè)服務(wù)等都對(duì)圖片服務(wù)有著極大的依賴。這些網(wǎng)站后臺(tái)儲(chǔ)存的圖片數(shù)量規(guī)模都達(dá)到了千億級(jí)別,如何支持如此大規(guī)模的圖片儲(chǔ)存和處理成了一個(gè)亟待解決的問題。一方面,互聯(lián)網(wǎng)圖片具有小而多的特點(diǎn),類似GFS的傳統(tǒng)分布式文件系統(tǒng)不適合這樣的海量小文件的存儲(chǔ);另一方面,圖片應(yīng)用常常需要同一圖片的不同尺寸版本,如何使得圖片服務(wù)能夠支持提供定制尺寸的圖片是一個(gè)具有現(xiàn)實(shí)意義的課題。所以,本課題的目的在于研究和實(shí)現(xiàn)一個(gè)高性能的分布式圖片服務(wù)器系統(tǒng)-WIMG。WIMG借鑒傳統(tǒng)分布式Master/Slave的架構(gòu),采用分布式的存儲(chǔ)和分布式的處理,采用緩存和保存新圖片的策略,能夠提供高性能的圖片服務(wù),整體架構(gòu)穩(wěn)定可靠、可擴(kuò)展。WIMG提供了簡單易用的客戶端接口,使得WIMG可以很方便的作為個(gè)人應(yīng)用或者網(wǎng)站系統(tǒng)的圖片存儲(chǔ)后端。
[Abstract]:After the Internet entered the web2.0 era, the content of the Internet changed from website to user-oriented. With the increasing number of Internet users and the increasing scale of Internet computing and storage, a single server has been unable to meet the requirements of high throughput, high concurrency and high reliability, so distributed computing came into being. The distributed system uses the idea of divide-and-conquer, distributes the total storage and computation to multiple servers, so that the whole system can achieve higher performance. Today, companies of a certain size are researching and implementing distributed solutions to save costs while ensuring high performance. Distributed picture service appears along with the development of Internet. Large social networks such as Facebook, Tencent, large ecommerce platforms such as Taobao, JingDong, and other large online photo album services are heavily dependent on photo services. The number of images stored in the background of these websites has reached hundreds of billions of levels, so how to support the storage and processing of images on such a large scale has become an urgent problem. On the one hand, the Internet images have the characteristics of small and many, the traditional distributed file system like GFS is not suitable for the storage of such a large number of small files; on the other hand, the application of images often requires different versions of the same picture. How to enable the picture service to support the customized size of the picture is a practical issue. Therefore, the purpose of this paper is to study and implement a high performance distributed picture server system -WIMG.WIMG, which uses the traditional distributed Master/Slave architecture, uses distributed storage and distributed processing, and adopts the strategy of caching and saving new pictures. Can provide high performance picture services, the overall framework is stable and reliable, extensible. WIMG provides a simple and easy to use client interface, so that WIMG can be very convenient as a personal application or website system picture storage back end.
【學(xué)位授予單位】：上海交通大學(xué)
【學(xué)位級(jí)別】：碩士
【學(xué)位授予年份】：2015
【分類號(hào)】：TP393.05

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 劉玉華;分布式系統(tǒng)[J];微電子學(xué)與計(jì)算機(jī);1983年05期

2 杜興，，謝立，孫鐘秀;一種基于對(duì)象的分布式系統(tǒng)描述求精方法[J];計(jì)算機(jī)學(xué)報(bào);1994年07期

3 趙宏;;分布式系統(tǒng)中合作進(jìn)程及其同步關(guān)系[J];計(jì)算機(jī)科學(xué);1995年02期

4 柴振榮;分布式系統(tǒng)的管理問題[J];管理科學(xué)文摘;1996年06期

5 歲豐;對(duì)分布式系統(tǒng)項(xiàng)目的領(lǐng)導(dǎo)[J];管理科學(xué)文摘;1996年12期

6 李斌;解決科學(xué)問題的分布式系統(tǒng)[J];管理科學(xué)文摘;1997年02期

7 楊運(yùn)偉,張戈,高建華;分布式系統(tǒng)中的投票協(xié)議[J];計(jì)算機(jī)應(yīng)用研究;2000年08期

8 徐海云;部件對(duì)象技術(shù)與分布式系統(tǒng)的開發(fā)[J];濟(jì)南交通高等�？茖W(xué)校學(xué)報(bào);2001年01期

9 唐少先,陳建二;分布式系統(tǒng)中有向流的最優(yōu)調(diào)控算法[J];計(jì)算技術(shù)與自動(dòng)化;2001年03期

10 錢斌,徐海云;部件對(duì)象技術(shù)與分布式系統(tǒng)的開發(fā)[J];管理信息系統(tǒng);2001年03期

相關(guān)會(huì)議論文 前10條

1 許趙云;黃林鵬;;分布式系統(tǒng)動(dòng)態(tài)更新的研究[A];2007年全國開放式分布與并行計(jì)算機(jī)學(xué)術(shù)會(huì)議論文集(下冊(cè))[C];2007年

2 殷躍鵬;郭長國;李小玲;王懷民;;基于事件的分布式系統(tǒng)行為分析框架[A];2010年全國開放式分布與并行計(jì)算機(jī)學(xué)術(shù)會(huì)議論文集[C];2010年

3 王曉鵬;蘇亮;韓偉紅;周斌;;大型分布式系統(tǒng)部署一致性的研究與實(shí)現(xiàn)[A];2006年全國開放式分布與并行計(jì)算機(jī)學(xué)術(shù)會(huì)議論文集（三）[C];2006年

4 何明;裘杭萍;楊飛;劉勇;;基于可信分布式系統(tǒng)的可信認(rèn)證技術(shù)研究[A];全國計(jì)算機(jī)安全學(xué)術(shù)交流會(huì)論文集（第二十三卷）[C];2008年

5 王剛;喬純捷;王躍科;;基于時(shí)鐘同步的分布式系統(tǒng)一致全局狀態(tài)[A];第三屆全國虛擬儀器大會(huì)論文集[C];2008年

6 周方;周光霞;;分布式系統(tǒng)軟件可靠性評(píng)估的研究[A];2005第二屆電子信息系統(tǒng)質(zhì)量與可靠性學(xué)術(shù)研討會(huì)論文集[C];2005年

7 馮錫煒;賈傳熒;楊家軒;;JMS技術(shù)在分布式系統(tǒng)中的應(yīng)用與實(shí)現(xiàn)[A];促進(jìn)企業(yè)信息化進(jìn)程——第十屆中國Java技術(shù)及應(yīng)用大會(huì)文集[C];2007年

8 蔣勇;李光文;張若文;;多業(yè)務(wù)數(shù)字分布式系統(tǒng)(MDAS)及其應(yīng)用[A];四川省通信學(xué)會(huì)2013年學(xué)術(shù)年會(huì)論文集[C];2013年

9 徐長盛;高欣;;分布式系統(tǒng)與Ice[A];全國冶金自動(dòng)化信息網(wǎng)2009年會(huì)論文集[C];2009年

10 劉淵;姜建國;繆繼東;范曉嵐;;一個(gè)分布式系統(tǒng)通信控制軟件的設(shè)計(jì)與實(shí)現(xiàn)[A];中國工程物理研究院科技年報(bào)（2002）[C];2002年

相關(guān)重要報(bào)紙文章 前6條

1 撫蘇;大數(shù)據(jù)帶來價(jià)值[N];電腦報(bào);2013年

2 ;首席“云”官[N];中國計(jì)算機(jī)報(bào);2009年

3 本報(bào)記者 黃舍予;得“數(shù)據(jù)”者得天下[N];人民郵電;2012年

4 范范　編譯;Docker威力：輕松化解“云鎖定”[N];網(wǎng)絡(luò)世界;2014年

5 ;IBM改進(jìn)大機(jī)管理[N];網(wǎng)絡(luò)世界;2006年

6 首都經(jīng)濟(jì)貿(mào)易大學(xué) 金勇;用Java和XML構(gòu)建分布式系統(tǒng)[N];計(jì)算機(jī)世界;2002年

相關(guān)博士學(xué)位論文 前10條

1 鄭紅;分布式系統(tǒng)形式化建模技術(shù)研究[D];中國科學(xué)院研究生院（軟件研究所）;2003年

2 尚慶紅;半分布式系統(tǒng)資源發(fā)現(xiàn)與資源分配研究[D];電子科技大學(xué);2013年

3 王德俊;面向服務(wù)的分布式系統(tǒng)動(dòng)態(tài)更新研究[D];上海交通大學(xué);2010年

4 陳曉江;分布式系統(tǒng)軟件體系結(jié)構(gòu)建模與開發(fā)方法研究[D];西北大學(xué);2010年

5 何盼;面向可靠性優(yōu)化設(shè)計(jì)的分布式系統(tǒng)資源分配研究[D];重慶大學(xué);2012年

6 唐小勇;異構(gòu)并行分布式系統(tǒng)可信調(diào)度理論與方法研究[D];湖南大學(xué);2013年

7 龔奕利;分布式環(huán)境中的資源發(fā)現(xiàn)研究[D];中國科學(xué)院研究生院（計(jì)算技術(shù)研究所）;2006年

8 彭艦;基于CORBA的分布式系統(tǒng)中實(shí)時(shí)—容錯(cuò)性的研究——分布式系統(tǒng)中動(dòng)態(tài)調(diào)度的設(shè)計(jì)與實(shí)現(xiàn)[D];電子科技大學(xué);2004年

9 劉國良;分布式系統(tǒng)中回卷恢復(fù)技術(shù)研究[D];重慶大學(xué);2012年

10 閔帆;基于試探的任務(wù)分配算法研究[D];電子科技大學(xué);2003年

相關(guān)碩士學(xué)位論文 前10條

1 遲云飛;基于分布式控制架構(gòu)的信號(hào)機(jī)設(shè)計(jì)研究[D];長安大學(xué);2015年

2 林神琦;一種優(yōu)化的分布式語音分發(fā)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];復(fù)旦大學(xué);2014年

3 勇嘉偉;基于分布式系統(tǒng)的軟件模型驗(yàn)證加速方法研究[D];大連理工大學(xué);2015年

4 馮博;基于PaaS的電信虛擬運(yùn)營商系統(tǒng)設(shè)計(jì)和實(shí)現(xiàn)[D];中國科學(xué)院大學(xué)(工程管理與信息技術(shù)學(xué)院);2015年

5 王春;高性能分布式圖片服務(wù)器研究與實(shí)現(xiàn)[D];上海交通大學(xué);2015年

6 殷躍鵬;基于事件的分布式系統(tǒng)行為分析框架的設(shè)計(jì)與實(shí)現(xiàn)[D];國防科學(xué)技術(shù)大學(xué);2010年

7 胡俊;構(gòu)建分布式系統(tǒng)的關(guān)鍵技術(shù)研究與實(shí)現(xiàn)[D];南京郵電大學(xué);2012年

8 謝志海;分布式系統(tǒng)測試關(guān)鍵技術(shù)研究[D];西安電子科技大學(xué);2013年

9 項(xiàng)震;基于多核處理機(jī)構(gòu)建分布式系統(tǒng)的關(guān)鍵技術(shù)研究[D];南京郵電大學(xué);2011年

10 盧旭;分布式系統(tǒng)自愈調(diào)控關(guān)鍵技術(shù)研究[D];哈爾濱工程大學(xué);2009年

本文編號(hào)：2155998