基于HBase的地理分布副本管理機制
發(fā)布時間:2018-07-10 15:35
本文選題:分布式系統(tǒng) + 一致性 ; 參考:《計算機應用》2015年11期
【摘要】:針對分布式存儲系統(tǒng)中數(shù)據(jù)通常在多個數(shù)據(jù)中心有冗余的副本進行備份,需要健壯的機制維護各個副本的一致性,對分布式系統(tǒng)的副本復制理論作了深入研究后,提出了一套管理地理分布副本的算法。微軟研究院提出服務等級協(xié)議,把用戶對一致性的要求分成若干級別,每個級別與用戶可容忍的延遲有關。系統(tǒng)保證在可容忍的延遲范圍內,用戶能擁有較高的服務等級。Tuba系統(tǒng)拓展了Pileus,允許系統(tǒng)根據(jù)所有用戶發(fā)送的統(tǒng)計信息動態(tài)地改變主從副本存放的位置,以提高系統(tǒng)的平均性能,但Tuba系統(tǒng)的復制只是基于單個目標單位進行。對Tuba系統(tǒng)中的方法作出改進,提出了一套改變主從副本存放位置的算法,并在HBase分布式系統(tǒng)的副本復制中實現(xiàn)了該機制。系統(tǒng)完成后,通過實驗驗證了在改變主從副本存放位置時綜合考慮兩個region的相關性可以提高系統(tǒng)整體的效用。
[Abstract]:In the distributed storage system, there are redundant replicas in many data centers, which need a robust mechanism to maintain the consistency of each replica, so the replica replication theory of the distributed system is deeply studied. A set of algorithms for managing geographical distribution copies is proposed. Microsoft Research proposes a service level agreement that divides the user's requirements for consistency into several levels, each related to the user's tolerable delay. The system guarantees that within the tolerable delay range, the user can have a higher level of service. Tuba system extends the Pileus. it allows the system to dynamically change the location of the master and slave copies to improve the average performance of the system based on the statistics sent by all users. But the replication of the Tuba system is based on a single target unit. This paper improves the method of Tuba system, proposes a set of algorithms to change the location of master and slave copies, and implements this mechanism in replica replication of HBASE distributed system. After the completion of the system, it is proved by experiments that considering the correlation of two region comprehensively when changing the location of master and slave copy storage can improve the effectiveness of the system as a whole.
【作者單位】: 中山大學數(shù)據(jù)科學與計算機學院;
【基金】:國家自然科學基金資助項目(61379157)
【分類號】:TP333
【相似文獻】
相關期刊論文 前8條
1 ;湖北人才地理分布統(tǒng)計表[J];湖北檔案;1988年01期
2 鄭衡泌;中國歷代藏書家籍貫屬地的地理分布和變遷[J];經(jīng)濟地理;2004年03期
3 鄭衡泌;福建歷代藏書家籍貫地的地理分布[J];福建地理;2003年02期
4 馬慶;;論中國近現(xiàn)代報人的地理分布[J];湖北社會科學;2011年11期
5 劉中猛;;論清末民初蘇籍報人的地理分布[J];淮陰師范學院學報(哲學社會科學版);2013年02期
6 李玲玲;俄出版《俄羅斯各民族百科手冊》[J];出版參考;1994年10期
7 陳亞;江濱;曾元兒;;基于地理信息系統(tǒng)的何首烏地理分布與氣候關系研究[J];中國現(xiàn)代中藥;2011年05期
8 ;[J];;年期
相關會議論文 前10條
1 吳詩寶;孫儒泳;馬廣智;劉^,
本文編號:2113822
本文鏈接:http://sikaile.net/kejilunwen/jisuanjikexuelunwen/2113822.html
最近更新
教材專著