本文選題：副本 + 通信優(yōu)化�。� 參考：《華中科技大學(xué)》2013年碩士論文

【摘要】：云計(jì)算和虛擬化技術(shù)的興起，使在虛擬機(jī)中做海量數(shù)據(jù)存儲(chǔ)和管理受到了越來(lái)越多人的關(guān)注，Cassandra作為一個(gè)高性能分布式非關(guān)系型數(shù)據(jù)管理系統(tǒng)，在虛擬化環(huán)境下面臨著新的通信問(wèn)題。對(duì)于讀請(qǐng)求，從相同物理機(jī)上虛擬機(jī)的讀效率要高于不同物理機(jī)上虛擬機(jī)的讀效率；對(duì)于寫(xiě)請(qǐng)求，需要將多個(gè)副本寫(xiě)到不同物理機(jī)的虛擬機(jī)上，避免物理機(jī)宕機(jī)，以至所有的副本不可訪問(wèn)。 虛擬化環(huán)境下面向分布式非關(guān)系型數(shù)據(jù)管理的通信優(yōu)化系統(tǒng)，首先是虛擬機(jī)位置感知，識(shí)別各個(gè)虛擬機(jī)之間的位置關(guān)系，為了避免單節(jié)點(diǎn)故障問(wèn)題，采用了P2P的Gossip協(xié)議，每個(gè)物理機(jī)獲取該節(jié)點(diǎn)上虛擬機(jī)的位置列表，，通過(guò)Gossip將數(shù)據(jù)傳播到其他的節(jié)點(diǎn)，每個(gè)節(jié)點(diǎn)保存所有虛擬機(jī)的位置信息；其次使用thrift發(fā)布位置信息，并且對(duì)數(shù)據(jù)重新組織和劃分，方便快速獲取所有虛擬機(jī)的位置信息；然后是寫(xiě)節(jié)點(diǎn)的選擇，當(dāng)收到寫(xiě)請(qǐng)求時(shí)，選擇不在同一物理機(jī)上的虛擬機(jī)節(jié)點(diǎn)作為寫(xiě)節(jié)點(diǎn)，避免任意物理機(jī)宕機(jī)造成的數(shù)據(jù)不可訪問(wèn)；最后是最優(yōu)讀節(jié)點(diǎn)的選擇，當(dāng)收到用戶(hù)的讀請(qǐng)求時(shí)，使用修改后的節(jié)點(diǎn)選擇算法，優(yōu)先選擇距離最近的節(jié)點(diǎn)讀取數(shù)據(jù)，從而提高讀效率。 功能測(cè)試表明，虛擬化環(huán)境下面向分布式非關(guān)系型數(shù)據(jù)管理的通信優(yōu)化系統(tǒng)能夠選擇正確的節(jié)點(diǎn)寫(xiě)；任意關(guān)閉一臺(tái)物理機(jī)，數(shù)據(jù)都可以讀取，數(shù)據(jù)的可訪問(wèn)性得到提高。性能測(cè)試表明，對(duì)于優(yōu)化后的系統(tǒng)，TPS提高了23%左右。
[Abstract]:With the rise of cloud computing and virtualization technology, more and more people pay attention to mass data storage and management in virtual machines. Cassandra is a high-performance distributed non-relational data management system. In the virtualization environment, we are facing new communication problems. For the read request, the reading efficiency of the virtual machine from the same physical machine is higher than that of the different physical machine virtual machine; for the write request, it is necessary to write multiple copies to the virtual machine of the different physical machine to avoid the physical machine downtime. Even all copies are not accessible. In order to avoid the problem of single node fault, the communication optimization system for distributed non-relational data management in virtualization environment is based on the location perception of virtual machine and the recognition of location relationship among virtual machines. In order to avoid the problem of single node fault, P2P Gossip protocol is adopted. Each physical machine obtains a list of locations of virtual machines on the node, propagates the data to other nodes through Gossip, and each node stores the location information of all virtual machines. Secondly, the location information is published using thrift, and the data is reorganized and partitioned. It is convenient to obtain the location information of all virtual machines quickly, and then the selection of write nodes. When the write request is received, the virtual machine nodes that are not on the same physical machine are selected as write nodes, so that the data caused by arbitrary physical outages can not be accessed. Finally, the optimal reading node is selected. When the user's request is received, the modified node selection algorithm is used to select the nearest node to read the data, so as to improve the reading efficiency. The function test shows that the communication optimization system for distributed non-relational data management in virtualization environment can select the correct node write, turn off a physical machine at any time, the data can be read, and the data accessibility is improved. The performance test shows that the TPS of the optimized system is improved by about 23%.
【學(xué)位授予單位】：華中科技大學(xué)
【學(xué)位級(jí)別】：碩士
【學(xué)位授予年份】：2013
【分類(lèi)號(hào)】：TP302

【共引文獻(xiàn)】

相關(guān)期刊論文 前10條

1 李恩學(xué);蔡榮海;;基于IME6400的MPEG-4嵌入式視頻監(jiān)控系統(tǒng)實(shí)現(xiàn)[J];安防科技;2009年12期

2 李勇;嵌入式Linux集成開(kāi)發(fā)環(huán)境的研究[J];安陽(yáng)師范學(xué)院學(xué)報(bào);2005年05期

3 吳曉勇,曾家智;操作系統(tǒng)內(nèi)核中動(dòng)態(tài)內(nèi)存分配機(jī)制的研究[J];成都信息工程學(xué)院學(xué)報(bào);2005年01期

4 王昊;張鐘澍;;一種改進(jìn)的Linux實(shí)時(shí)進(jìn)程調(diào)度算法——RAD算法[J];成都信息工程學(xué)院學(xué)報(bào);2009年03期

5 陳小蘭;楊斌;;多處理器平臺(tái)下Linux 2.6啟動(dòng)過(guò)程中的位圖分析[J];成都信息工程學(xué)院學(xué)報(bào);2010年01期

6 張科;楊斌;;Linux內(nèi)核交互式和非交互式進(jìn)程判別算法的質(zhì)疑[J];成都信息工程學(xué)院學(xué)報(bào);2010年02期

7 許繼彥;杜欽生;;紅外通信模塊的設(shè)計(jì)與實(shí)現(xiàn)[J];長(zhǎng)春大學(xué)學(xué)報(bào);2009年10期

8 鄒秋艷;徐紅云;;基于Linux2.6的進(jìn)程隱藏機(jī)制的實(shí)現(xiàn)[J];重慶理工大學(xué)學(xué)報(bào)(自然科學(xué)版);2010年05期

9 劉暢;進(jìn)程遷移中套接字遷移的研究與實(shí)現(xiàn)[J];重慶師范大學(xué)學(xué)報(bào)(自然科學(xué)版);2004年02期

10 張繼虎;;基于S3C44B0X處理器的CAN節(jié)點(diǎn)的構(gòu)建方案[J];電源技術(shù)應(yīng)用;2010年04期

相關(guān)會(huì)議論文 前3條

1 趙旭;夏靖波;王哲;;Linux內(nèi)核進(jìn)程調(diào)度的研究與改進(jìn)[A];第三屆全國(guó)嵌入式技術(shù)和信息處理聯(lián)合學(xué)術(shù)會(huì)議論文集[C];2009年

2 韓中波;徐大專(zhuān);;多通道超聲波探傷系統(tǒng)軟件設(shè)計(jì)與實(shí)現(xiàn)[A];2008中國(guó)儀器儀表與測(cè)控技術(shù)進(jìn)展大會(huì)論文集（Ⅲ）[C];2008年

3 姚玉坤;喬彬;;嵌入式操作系統(tǒng)內(nèi)存管理機(jī)制研究與改進(jìn)[A];2009中國(guó)儀器儀表與測(cè)控技術(shù)大會(huì)論文集[C];2009年

相關(guān)博士學(xué)位論文 前9條

1 孟江濤;Xen虛擬機(jī)研究[D];電子科技大學(xué);2010年

2 毛佳;嵌入式實(shí)時(shí)系統(tǒng)中關(guān)鍵技術(shù)的研究[D];吉林大學(xué);2004年

3 劉勁松;關(guān)于存儲(chǔ)系統(tǒng)性能的測(cè)試、仿真與評(píng)價(jià)的研究[D];華中科技大學(xué);2004年

4 鄧玉輝;基于網(wǎng)絡(luò)磁盤(pán)陣列的海量信息存儲(chǔ)系統(tǒng)[D];華中科技大學(xué);2004年

5 李海山;面向恢復(fù)的容錯(cuò)計(jì)算技術(shù)研究[D];哈爾濱工程大學(xué);2007年

6 楊泓淵;復(fù)雜山地自定位無(wú)纜地震儀的研究與實(shí)現(xiàn)[D];吉林大學(xué);2009年

7 方海濤;基于RTAI的多關(guān)節(jié)式月球車(chē)運(yùn)動(dòng)控制研究[D];哈爾濱工業(yè)大學(xué);2009年

8 王金寶;云計(jì)算系統(tǒng)中索引與查詢(xún)處理技術(shù)研究[D];哈爾濱工業(yè)大學(xué);2013年

9 吳和生;云計(jì)算環(huán)境中多核多進(jìn)程負(fù)載均衡技術(shù)的研究與應(yīng)用[D];南京大學(xué);2013年

相關(guān)碩士學(xué)位論文 前10條

1 卞傳旭;基于TOS架構(gòu)的防火墻性能研究與改進(jìn)[D];山東科技大學(xué);2010年

2 張憲華;基于嵌入式Linux的系統(tǒng)構(gòu)建及桌面應(yīng)用程序研究[D];山東科技大學(xué);2010年

3 崔運(yùn)濤;基于ARM+DSP的捷聯(lián)航姿系統(tǒng)設(shè)計(jì)[D];哈爾濱工程大學(xué);2010年

4 黃宇;嵌入式多模態(tài)生物特征識(shí)別系統(tǒng)設(shè)計(jì)[D];哈爾濱工程大學(xué);2010年

5 蒙會(huì)民;基于嵌入式平臺(tái)的電梯監(jiān)控系統(tǒng)的設(shè)計(jì)與研究[D];大連海事大學(xué);2010年

6 步東偉;稻米質(zhì)量國(guó)家標(biāo)準(zhǔn)參數(shù)智能化測(cè)試儀的研制[D];河南工業(yè)大學(xué);2010年

7 王韜;基于Linux路由器的P2P流量識(shí)別控制系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];蘇州大學(xué);2010年

8 楊澤明;WLAN環(huán)境下的入侵檢測(cè)防御系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];蘇州大學(xué);2010年

9 徐向前;基于Linux的嵌入式路由器軟件的設(shè)計(jì)與實(shí)現(xiàn)[D];蘇州大學(xué);2010年

10 張闖;基于ARM/GPRS的遠(yuǎn)程水文監(jiān)測(cè)終端設(shè)計(jì)[D];哈爾濱理工大學(xué);2010年

本文編號(hào)：1943852