基于Hadoop的建筑信息檢索平臺架構(gòu)的設(shè)計與實現(xiàn)

發(fā)布時間：2019-09-06 18:18

【摘要】：電子技術(shù)高速發(fā)展，電子產(chǎn)品越來越發(fā)達(dá)，價格越來越低廉。智能移動手機已經(jīng)得到廣泛使用，當(dāng)前，智能手機與人們生活密切相關(guān)。熱點應(yīng)用有手機上網(wǎng)看新聞、移動社交、移動即時通信等。基于位置服務(wù)(Location Based Services，LBS)的應(yīng)用也受到移動用戶的青睞。本文的研究基于以下平臺：利用移動手機的GPS、攝像頭等設(shè)備獲取用戶當(dāng)前位置和建筑物的模型圖等信息，使用相關(guān)技術(shù)來查找用戶指定的建筑。本文研究的主要目標(biāo)為：選擇合適平臺存儲建筑物信息，以有效方式組織和管理建筑物的信息，根據(jù)用戶當(dāng)前地理位置快速查找用戶指定的建筑物。基于該目標(biāo)，本文主要做了以下幾方面的工作。分析Hadoop分布式軟件框架。Hadoop可以存儲大容量數(shù)據(jù)，容易擴展。本文的海量建筑數(shù)據(jù)適合使用Hadoop存儲。分析了Hadoop的分布式文件系統(tǒng)HDFS和分布式數(shù)據(jù)庫HBase，介紹它們的存儲機制、讀寫流程和優(yōu)缺點。使用區(qū)域劃分的方法來存儲和檢索建筑。地理位置屬于空間數(shù)據(jù)，很難對地理位置進行排序。本文使用樹狀目錄結(jié)構(gòu)來組織建筑的數(shù)據(jù)，并劃分區(qū)域，縮小查找建筑的范圍，提高檢索效率。使用負(fù)載均衡策略來提高服務(wù)器對用戶訪問的響應(yīng)速度。建筑數(shù)量大，但是只有一部分建筑經(jīng)常被用戶訪問，對于這種建筑需要采取特殊方式處理。本文的負(fù)載均衡策略基于文件的訪問頻繁度，對于經(jīng)常訪問的文件均衡地分布到服務(wù)器集群的各個節(jié)點。通過對訪問進行負(fù)載均衡，平衡各個節(jié)點訪問的負(fù)載壓力，從而提高整個集群服務(wù)器對用戶訪問的響應(yīng)速度。
【圖文】：

流程圖,寫入文件,流程,公司發(fā)展

圖 2-3 寫入文件DFS 之上面向列的分布式谷歌公司發(fā)展的用于管理用 Bigtable 存儲數(shù)據(jù)，例ase 就是其中一個實現(xiàn)。類S 作為底層存儲。持線性和模塊化擴展的特樣，RegionServer 也是部 20 個 RegionServer，它的是它通常是逐個節(jié)點擴展

架構(gòu)圖,架構(gòu)