隨著谷歌文件系統(tǒng)和寬表結(jié)構(gòu)為代表的技術(shù)打破依賴關(guān)系數(shù)據(jù)庫管理海量數(shù)據(jù)的限制,以Apache Hadoop為代表的開源大數(shù)據(jù)管理系統(tǒng)軟件新技術(shù)與系統(tǒng)不斷涌現(xiàn),并快速成熟應(yīng)用。針對Apache開源社區(qū)中面向在線事務(wù)處理和在線分析處理場景的大數(shù)據(jù)管理軟件,介紹了大數(shù)據(jù)管理中的數(shù)據(jù)存儲、數(shù)據(jù)分區(qū)、副本機制、分布式協(xié)議等,并比較分析了分布式文件系統(tǒng)、鍵值庫、時序數(shù)據(jù)庫等典型分布式數(shù)據(jù)管理系統(tǒng)的優(yōu)缺點。

【文章頁數(shù)】：12 頁

【文章目錄】：
1 大數(shù)據(jù)存儲引擎關(guān)鍵技術(shù)
    1.1 系統(tǒng)負(fù)載管理
    1.2 LSM結(jié)構(gòu)
    1.3 列式文件格式
2 數(shù)據(jù)分區(qū)技術(shù)分析
3 副本機制設(shè)計
    3.1 副本一致性問題
    3.2 副本與糾刪碼
4 分布式協(xié)議
    4.1 法團（Quorum）協(xié)議
    4.2 共識算法
5 Apache社區(qū)中的大數(shù)據(jù)管理系統(tǒng)
    5.1 分布式文件系統(tǒng)Apache Hadoop
    5.2 鍵值數(shù)據(jù)管理系統(tǒng)
    5.3 時序數(shù)據(jù)管理系統(tǒng)
6 結(jié)論



本文編號：3931296