基于HBase的空間數(shù)據(jù)云存儲(chǔ)研究
本文關(guān)鍵詞:基于HBase的空間數(shù)據(jù)云存儲(chǔ)研究
更多相關(guān)文章: GeoHash HBase 空間查詢 并行處理
【摘要】:隨著GPS和北斗等定位技術(shù)的快速發(fā)展,物聯(lián)網(wǎng)、車聯(lián)網(wǎng)、移動(dòng)互聯(lián)網(wǎng)等基于實(shí)時(shí)定位技術(shù)的應(yīng)用不斷成熟,空間數(shù)據(jù)呈現(xiàn)井噴式增長(zhǎng)。面對(duì)互聯(lián)網(wǎng)環(huán)境下數(shù)據(jù)類型多,更新快,高并發(fā)訪問(wèn)等特征,傳統(tǒng)的數(shù)據(jù)管理方式日益難以適應(yīng)需求。因此,高效的存儲(chǔ)和管理空間大數(shù)據(jù),成為當(dāng)下亟待解決的問(wèn)題。云存儲(chǔ)和分布式計(jì)算為上述問(wèn)題的解決提供了一種新的途徑。本文針對(duì)目前空間數(shù)據(jù)存儲(chǔ)管理方法的不足,利用分布式數(shù)據(jù)庫(kù)HBase存儲(chǔ)管理海量空間數(shù)據(jù),研究了HBase中空間數(shù)據(jù)的存儲(chǔ)模型以及并行處理的關(guān)鍵技術(shù),主要做了以下工作:(1)分析了云平臺(tái)下HDFS和HBase的架構(gòu)和技術(shù)原理,以及MapReduce計(jì)算框架,為云計(jì)算環(huán)境下空間數(shù)據(jù)的管理奠定基礎(chǔ)。(2)HBase以一維的行鍵進(jìn)行查詢,而矢量線、面數(shù)據(jù)包含多個(gè)二維的坐標(biāo)。如何將多個(gè)二維的坐標(biāo)轉(zhuǎn)化一維字符串,就成了HBase存儲(chǔ)管理空間首要問(wèn)題。本文基于GeoHash空間降維算法,探索適合云平臺(tái)下的空間數(shù)據(jù)索引方法。(3)結(jié)合HBase的NoSQL特性,設(shè)計(jì)了空間數(shù)據(jù)在HBase中的存儲(chǔ)模型,并利用MapReduce分布式計(jì)算框架,給出了矢量線、面的并行化查詢流程。最后,通過(guò)實(shí)驗(yàn)證明,本文設(shè)計(jì)的基于GeoHash曲線索引的HBase空間數(shù)據(jù)存儲(chǔ)模型,以及并行化查詢流程具有良好性能。
【學(xué)位授予單位】:河南大學(xué)
【學(xué)位級(jí)別】:碩士
【學(xué)位授予年份】:2016
【分類號(hào)】:P208
【相似文獻(xiàn)】
中國(guó)期刊全文數(shù)據(jù)庫(kù) 前10條
1 劉瑜,張毅,鄔倫;空間數(shù)據(jù)工程理論框架研究[J];地理與地理信息科學(xué);2003年01期
2 李曉印,張友順,楊昕,劉愛(ài)利;空間數(shù)據(jù)的“無(wú)紙化”管理探討[J];國(guó)土資源科技管理;2004年02期
3 ;《空間數(shù)據(jù)系統(tǒng)》[J];航天器工程;2005年01期
4 陳俊杰,鄒友峰;GIS空間數(shù)據(jù)質(zhì)量評(píng)價(jià)軟件設(shè)計(jì)探討[J];礦山測(cè)量;2005年03期
5 洪志全,葉琳,辛俊,張于峰;GIS空間數(shù)據(jù)索引技術(shù)研究與實(shí)現(xiàn)[J];物探化探計(jì)算技術(shù);2005年01期
6 胡圣武;張光勝;王宏濤;;空間數(shù)據(jù)建庫(kù)研究[J];地球科學(xué)與環(huán)境學(xué)報(bào);2007年02期
7 李偉芬;丁靜;苗卿;;空間數(shù)據(jù)多尺度研究綜述[J];電腦知識(shí)與技術(shù)(學(xué)術(shù)交流);2007年13期
8 王慶光;;GIS空間數(shù)據(jù)質(zhì)量研究[J];水利科技與經(jīng)濟(jì);2007年05期
9 丁濱;夏洪山;;GIS空間數(shù)據(jù)索引技術(shù)研究[J];江蘇航空;2007年04期
10 譚紅霞;;GIS空間數(shù)據(jù)的質(zhì)量探討[J];山東國(guó)土資源;2009年06期
中國(guó)重要會(huì)議論文全文數(shù)據(jù)庫(kù) 前10條
1 汪建光;;空間數(shù)據(jù)自動(dòng)批處理技術(shù)研究[A];2009全國(guó)測(cè)繪科技信息交流會(huì)暨首屆測(cè)繪博客征文頒獎(jiǎng)?wù)撐募痆C];2009年
2 楊成韞;榮芳;彭子風(fēng);;基于客戶/服務(wù)器結(jié)構(gòu)的空間數(shù)據(jù)分布式處理研究[A];新世紀(jì) 新機(jī)遇 新挑戰(zhàn)——知識(shí)創(chuàng)新和高新技術(shù)產(chǎn)業(yè)發(fā)展(上冊(cè))[C];2001年
3 陳良剛;王海兵;王宇君;施伯樂(lè);;基于約束的空間數(shù)據(jù)查詢[A];第十七屆全國(guó)數(shù)據(jù)庫(kù)學(xué)術(shù)會(huì)議論文集(研究報(bào)告篇)[C];2000年
4 陳犖;劉云翔;唐宇;景寧;;基于優(yōu)先圖的空間數(shù)據(jù)應(yīng)用服務(wù)鏈建模方法[A];第二十屆全國(guó)數(shù)據(jù)庫(kù)學(xué)術(shù)會(huì)議論文集(研究報(bào)告篇)[C];2003年
5 杜紅悅;宮輝力;馮克忠;賈建坤;權(quán)忠生;;應(yīng)急救災(zāi)空間數(shù)據(jù)中心建設(shè)技術(shù)與策略研究[A];第十七屆中國(guó)遙感大會(huì)摘要集[C];2010年
6 李諾夫;黎雷;;網(wǎng)絡(luò)環(huán)境下空間數(shù)據(jù)的管理[A];地理空間信息技術(shù)與應(yīng)用——中國(guó)科協(xié)2002年學(xué)術(shù)年會(huì)測(cè)繪論文集[C];2002年
7 劉新貴;黃雅娟;;空間數(shù)據(jù)網(wǎng)絡(luò)化獲取與管理初探[A];中國(guó)地理信息系統(tǒng)協(xié)會(huì)第三次代表大會(huì)暨第七屆年會(huì)論文集[C];2003年
8 廖佳;;基礎(chǔ)空間數(shù)據(jù)生命周期管理[A];地理空間信息技術(shù)及其應(yīng)用論壇論文集[C];2005年
9 葉榮青;吳曉玲;;福建省基礎(chǔ)空間數(shù)據(jù)管理技術(shù)研究[A];第四屆海峽兩岸GIS發(fā)展研討會(huì)暨中國(guó)GIS協(xié)會(huì)第十屆年會(huì)論文集[C];2006年
10 方金云;;空間數(shù)據(jù)虛擬化的實(shí)現(xiàn)技術(shù)研究[A];中國(guó)地理信息系統(tǒng)協(xié)會(huì)第九屆年會(huì)論文集[C];2005年
中國(guó)重要報(bào)紙全文數(shù)據(jù)庫(kù) 前10條
1 寧津生 陳軍 晁定波;空間數(shù)據(jù)質(zhì)量的主要內(nèi)涵[N];中國(guó)測(cè)繪報(bào);2002年
2 李豐丹;“國(guó)家地質(zhì)空間數(shù)據(jù)網(wǎng)格服務(wù)系統(tǒng)”獲發(fā)明專利[N];中國(guó)礦業(yè)報(bào);2009年
3 記者 胡其峰;多項(xiàng)空間數(shù)據(jù)成果向社會(huì)開放[N];光明日?qǐng)?bào);2013年
4 孫昭榮;GIS圖窮數(shù)字見(jiàn)[N];中國(guó)計(jì)算機(jī)報(bào);2002年
5 寧津生 陳軍 晁定波;空間數(shù)據(jù)的質(zhì)量控制方法[N];中國(guó)測(cè)繪報(bào);2002年
6 劉榮梅;中國(guó)1∶100萬(wàn)地質(zhì)圖空間數(shù)據(jù)實(shí)現(xiàn)國(guó)際共享[N];中國(guó)國(guó)土資源報(bào);2014年
7 陳拂曉;空間數(shù)據(jù):“數(shù)字城市”建設(shè)的基礎(chǔ)[N];中國(guó)計(jì)算機(jī)報(bào);2002年
8 王東華邋羅建軍;美國(guó)空間數(shù)據(jù)一站式服務(wù)系統(tǒng)[N];中國(guó)測(cè)繪報(bào);2007年
9 深圳商報(bào)記者 董超文;一部手機(jī)將可“裝”下一座城市[N];深圳商報(bào);2006年
10 中國(guó)工程院院士 劉先林;航測(cè)為智慧城市建設(shè)提供空間數(shù)據(jù)[N];中國(guó)信息化周報(bào);2014年
中國(guó)博士學(xué)位論文全文數(shù)據(jù)庫(kù) 前10條
1 劉義;大規(guī)?臻g數(shù)據(jù)的高性能查詢處理關(guān)鍵技術(shù)研究[D];國(guó)防科學(xué)技術(shù)大學(xué);2013年
2 范建永;基于Hadoop的云GIS若干關(guān)鍵技術(shù)研究[D];解放軍信息工程大學(xué);2013年
3 馬伯寧;空間數(shù)據(jù)多尺度建模關(guān)鍵技術(shù)研究[D];國(guó)防科學(xué)技術(shù)大學(xué);2014年
4 劉偉;基于地理本體的空間數(shù)據(jù)服務(wù)發(fā)現(xiàn)與集成[D];中國(guó)礦業(yè)大學(xué);2010年
5 陳曉斌;基于網(wǎng)格中間件的空間數(shù)據(jù)訪問(wèn)與集成技術(shù)[D];解放軍信息工程大學(xué);2012年
6 李世明;林業(yè)空間數(shù)據(jù)平臺(tái)技術(shù)的應(yīng)用示范研究[D];中國(guó)林業(yè)科學(xué)研究院;2008年
7 郭加樹;空間數(shù)據(jù)倉(cāng)的構(gòu)建及應(yīng)用[D];中國(guó)石油大學(xué);2007年
8 桑永勝;空間數(shù)據(jù)分析的神經(jīng)計(jì)算方法[D];電子科技大學(xué);2010年
9 劉丹;對(duì)等計(jì)算環(huán)境中的空間數(shù)據(jù)查詢定位研究[D];武漢大學(xué);2011年
10 胡茂勝;基于數(shù)據(jù)中心模式的分布式異構(gòu)空間數(shù)據(jù)無(wú)縫集成技術(shù)研究[D];中國(guó)地質(zhì)大學(xué);2009年
中國(guó)碩士學(xué)位論文全文數(shù)據(jù)庫(kù) 前10條
1 張明佳;空間數(shù)據(jù)地圖模型的原型設(shè)計(jì)[D];中國(guó)地質(zhì)大學(xué)(北京);2015年
2 于海濤;基于AE的油氣田地理信息系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];中國(guó)地質(zhì)大學(xué)(北京);2015年
3 付悅?cè)A;基于概念格的空間數(shù)據(jù)規(guī)則提取[D];江西理工大學(xué);2015年
4 項(xiàng)天宋;非洲綜合資源環(huán)境信息空間可視化系統(tǒng)設(shè)計(jì)與應(yīng)用研究[D];福建師范大學(xué);2015年
5 梁杰超;空間數(shù)據(jù)的訪問(wèn)控制技術(shù)研究[D];浙江大學(xué);2015年
6 崔洪博;重慶配電網(wǎng)基礎(chǔ)地理信息系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)[D];電子科技大學(xué);2015年
7 黃正中;空間環(huán)境數(shù)據(jù)處理及可視化交互技術(shù)研究[D];電子科技大學(xué);2014年
8 李青巖;Android下的移動(dòng)空間數(shù)據(jù)存取方法研究[D];江西理工大學(xué);2015年
9 何拴;基于ArcGIS的黑河中游水資源信息化平臺(tái)研究[D];蘭州大學(xué);2015年
10 李真;海防雷達(dá)實(shí)訓(xùn)數(shù)據(jù)管理系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];大連海事大學(xué);2015年
,本文編號(hào):1189172
本文鏈接:http://sikaile.net/kejilunwen/dizhicehuilunwen/1189172.html