基于HBase的地理分布副本管理機(jī)制
發(fā)布時(shí)間:2018-07-10 15:35
本文選題:分布式系統(tǒng) + 一致性; 參考:《計(jì)算機(jī)應(yīng)用》2015年11期
【摘要】:針對(duì)分布式存儲(chǔ)系統(tǒng)中數(shù)據(jù)通常在多個(gè)數(shù)據(jù)中心有冗余的副本進(jìn)行備份,需要健壯的機(jī)制維護(hù)各個(gè)副本的一致性,對(duì)分布式系統(tǒng)的副本復(fù)制理論作了深入研究后,提出了一套管理地理分布副本的算法。微軟研究院提出服務(wù)等級(jí)協(xié)議,把用戶對(duì)一致性的要求分成若干級(jí)別,每個(gè)級(jí)別與用戶可容忍的延遲有關(guān)。系統(tǒng)保證在可容忍的延遲范圍內(nèi),用戶能擁有較高的服務(wù)等級(jí)。Tuba系統(tǒng)拓展了Pileus,允許系統(tǒng)根據(jù)所有用戶發(fā)送的統(tǒng)計(jì)信息動(dòng)態(tài)地改變主從副本存放的位置,以提高系統(tǒng)的平均性能,但Tuba系統(tǒng)的復(fù)制只是基于單個(gè)目標(biāo)單位進(jìn)行。對(duì)Tuba系統(tǒng)中的方法作出改進(jìn),提出了一套改變主從副本存放位置的算法,并在HBase分布式系統(tǒng)的副本復(fù)制中實(shí)現(xiàn)了該機(jī)制。系統(tǒng)完成后,通過(guò)實(shí)驗(yàn)驗(yàn)證了在改變主從副本存放位置時(shí)綜合考慮兩個(gè)region的相關(guān)性可以提高系統(tǒng)整體的效用。
[Abstract]:In the distributed storage system, there are redundant replicas in many data centers, which need a robust mechanism to maintain the consistency of each replica, so the replica replication theory of the distributed system is deeply studied. A set of algorithms for managing geographical distribution copies is proposed. Microsoft Research proposes a service level agreement that divides the user's requirements for consistency into several levels, each related to the user's tolerable delay. The system guarantees that within the tolerable delay range, the user can have a higher level of service. Tuba system extends the Pileus. it allows the system to dynamically change the location of the master and slave copies to improve the average performance of the system based on the statistics sent by all users. But the replication of the Tuba system is based on a single target unit. This paper improves the method of Tuba system, proposes a set of algorithms to change the location of master and slave copies, and implements this mechanism in replica replication of HBASE distributed system. After the completion of the system, it is proved by experiments that considering the correlation of two region comprehensively when changing the location of master and slave copy storage can improve the effectiveness of the system as a whole.
【作者單位】: 中山大學(xué)數(shù)據(jù)科學(xué)與計(jì)算機(jī)學(xué)院;
【基金】:國(guó)家自然科學(xué)基金資助項(xiàng)目(61379157)
【分類號(hào)】:TP333
【相似文獻(xiàn)】
相關(guān)期刊論文 前8條
1 ;湖北人才地理分布統(tǒng)計(jì)表[J];湖北檔案;1988年01期
2 鄭衡泌;中國(guó)歷代藏書(shū)家籍貫屬地的地理分布和變遷[J];經(jīng)濟(jì)地理;2004年03期
3 鄭衡泌;福建歷代藏書(shū)家籍貫地的地理分布[J];福建地理;2003年02期
4 馬慶;;論中國(guó)近現(xiàn)代報(bào)人的地理分布[J];湖北社會(huì)科學(xué);2011年11期
5 劉中猛;;論清末民初蘇籍報(bào)人的地理分布[J];淮陰師范學(xué)院學(xué)報(bào)(哲學(xué)社會(huì)科學(xué)版);2013年02期
6 李玲玲;俄出版《俄羅斯各民族百科手冊(cè)》[J];出版參考;1994年10期
7 陳亞;江濱;曾元兒;;基于地理信息系統(tǒng)的何首烏地理分布與氣候關(guān)系研究[J];中國(guó)現(xiàn)代中藥;2011年05期
8 ;[J];;年期
相關(guān)會(huì)議論文 前10條
1 吳詩(shī)寶;孫儒泳;馬廣智;劉^,
本文編號(hào):2113822
本文鏈接:http://sikaile.net/kejilunwen/jisuanjikexuelunwen/2113822.html
最近更新
教材專著