隨著大數(shù)據(jù)處理與存儲技術的發(fā)展,某些企業(yè)租用“公有云”或構建“私有云”來滿足“云計算”和“云存儲”需求。但租用“公有云”一般伴隨著數(shù)據(jù)的安全性問題,而傳統(tǒng)“私有云”的建立和維護需要更大的人力和資金成本。近年來,圍繞物聯(lián)網(wǎng)的結構化大數(shù)據(jù)的應用需求,低成本、高安全性的嵌入式“私有云”大數(shù)據(jù)中心倍受企業(yè)關注。論文研究基于嵌入式的大數(shù)據(jù)平臺關鍵技術,搭建嵌入式“私有云”平臺,適合中小型企業(yè)或家庭,以及對移動便攜性有要求的系統(tǒng)。論文研究結構化大數(shù)據(jù)和節(jié)點信息在資源有限的嵌入式平臺上的存儲機制與集群管理算法優(yōu)化方法,在分析傳統(tǒng)集群管理中節(jié)點信息存儲和容錯機制的基礎上,提出了一種優(yōu)化的基于大堆樹節(jié)點信息存儲的低開銷集群管理機制和一種基于列數(shù)據(jù)存儲的混合壓縮策略,降低了節(jié)點信息和數(shù)據(jù)的空間開銷及故障檢測通信量。在嵌入式平臺上實現(xiàn)了大數(shù)據(jù)庫引擎的移植與優(yōu)化,搭建了嵌入式Web服務器Lighttpd,實現(xiàn)了嵌入式大數(shù)據(jù)平臺的集群管理與數(shù)據(jù)存儲等基本功能。論文的主要工作如下:（1）優(yōu)化了基于大堆樹的低開銷集群管理機制,降低存儲節(jié)點信息的平均空間開銷,并在心跳檢測機制中,得以區(qū)分Master的節(jié)點故障及鏈路故... 

【文章來源】：北京郵電大學北京市 211工程院校 教育部直屬院校

【文章頁數(shù)】：73 頁

【學位級別】：碩士

【部分圖文】：

圖２－１?ＰＵＬＬ方式的心跳檢測??

?！?＿?Ｋｕ，?！?＇?Ｋｕ，：??圖２－１?ＰＵＬＬ方式的心跳檢測??２）?ＰＵＳＨ模型??ＰＵＳＨ模型的基本原理為：被檢測進程ｑ主動周期性地推送心跳包（包含節(jié)??點運行狀態(tài)）到檢測進程Ｐ，若ｐ在規(guī)定時間內(nèi)未收到來自ｑ的心跳包，則判定??ｑ所在的節(jié)點失效。過程不意圖如下：??＾＾?＾ｓｃｎｄ???｜４?？］?１＜?？！?＾?ｈ??１?Ａｔｏｕ，?！?？?Ａｔｏｕ，?！?＇?Ｋｕ，?！??圖２－２?ＰＵＳＨ方式的心跳檢測??ＰＵＳＨ模型檢測效率較高，但容易因為網(wǎng)絡延時等原因導致誤判；ＰＵＬＬ模??型為問詢式的檢測模型，檢測的可靠性較高，但一次檢測需要在兩個進程之間進??行兩次信息傳遞，效率比ＰＵＳＨ模型低一倍。??２．１．２故障恢復技術??通常意義上節(jié)點的故障恢復包括兩種：①人工參與的故障恢復；②集群內(nèi)部??的自適應故障恢復

?！?＿?Ｋｕ，?！?＇?Ｋｕ，：??圖２－１?ＰＵＬＬ方式的心跳檢測??２）?ＰＵＳＨ模型??ＰＵＳＨ模型的基本原理為：被檢測進程ｑ主動周期性地推送心跳包（包含節(jié)??點運行狀態(tài)）到檢測進程Ｐ，若ｐ在規(guī)定時間內(nèi)未收到來自ｑ的心跳包，則判定??ｑ所在的節(jié)點失效。過程不意圖如下：??＾＾?＾ｓｃｎｄ???｜４?？］?１＜?？！?＾?ｈ??１?Ａｔｏｕ，?！?？?Ａｔｏｕ，?！?＇?Ｋｕ，?！??圖２－２?ＰＵＳＨ方式的心跳檢測??ＰＵＳＨ模型檢測效率較高，但容易因為網(wǎng)絡延時等原因導致誤判；ＰＵＬＬ模??型為問詢式的檢測模型，檢測的可靠性較高，但一次檢測需要在兩個進程之間進??行兩次信息傳遞，效率比ＰＵＳＨ模型低一倍。??２．１．２故障恢復技術??通常意義上節(jié)點的故障恢復包括兩種：①人工參與的故障恢復；②集群內(nèi)部??的自適應故障恢復

【參考文獻】：
期刊論文
[1]一種高效匹配PCRE的擴展自動機[J]. 劉鵬,姚遠,邰銘,張錚.  計算機工程. 2010(12)
[2]基于列存儲數(shù)據(jù)庫的壓縮態(tài)數(shù)據(jù)訪問算法[J]. 黃鵬,李占山,張永剛,鞠奇.  吉林大學學報(理學版). 2009(05)
[3]淺析嵌入式程序設計中的優(yōu)化問題[J]. 劉鋒,張曉林.  單片機與嵌入式系統(tǒng)應用. 2006(12)

碩士論文
[1]嵌入式深度神經(jīng)網(wǎng)絡的模型壓縮與前向加速技術研究[D]. 丁杰.中國科學技術大學 2018
[2]集群管理系統(tǒng)關鍵技術研究[D]. 許巡枝.北京郵電大學 2018
[3]制造業(yè)大數(shù)據(jù)分布式存儲管理方法研究[D]. 王敏.武漢大學 2017
[4]數(shù)字家庭環(huán)境下的嵌入式Web服務器的設計及實現(xiàn)[D]. 楊峰.南京理工大學 2007



本文編號：3532998