【摘要】：在最近的幾十年里,GIS(地理信息系統(tǒng))技術(shù)取得了巨大的進(jìn)步,應(yīng)用也日趨廣泛和深化。作為GIS數(shù)據(jù)中的一種重要數(shù)據(jù)格式,地圖瓦片文件的存儲(chǔ)與管理也愈發(fā)得到人們的關(guān)注。早期的GIS運(yùn)行在單機(jī)系統(tǒng)上,主要以文件方式來管理瓦片文件,隨著計(jì)算機(jī)技術(shù)和Internet的發(fā)展,瓦片文件的管理逐漸走向網(wǎng)絡(luò)化以及分布式。瓦片地圖技術(shù)采用了“以空間換取時(shí)間”的策略,從而提供快速的地圖服務(wù),給用戶帶來了更好的體驗(yàn)。這種策略帶來了磁盤空間浪費(fèi)、瓦片文件安全性和共享性差等問題。因此針對(duì)瓦片文件數(shù)據(jù)量大,文件小,結(jié)構(gòu)嚴(yán)格等特點(diǎn),結(jié)合Hadoop分布式框架的特性,本文研究并設(shè)計(jì)了一套基于Hadoop的瓦片文件管理方案。從瓦片文件的組織方式和存儲(chǔ)方式對(duì)瓦片文件的管理進(jìn)行研究,在對(duì)比分析了目前主流的幾種瓦片文件管理方法后,從以下幾個(gè)方面開展工作:在對(duì)瓦片文件結(jié)構(gòu)分析的基礎(chǔ)上,設(shè)計(jì)并實(shí)現(xiàn)一套瓦片緊湊方法,將原有的松散瓦片文件轉(zhuǎn)化為緊湊瓦片文件;建立瓦片文件的兩級(jí)索引機(jī)制,為第三方GIS平臺(tái)或用戶訪問瓦片文件提供接口;實(shí)現(xiàn)瓦片文件在Hadoop中的分布式管理,解決瓦片文件存儲(chǔ)中磁盤空間浪費(fèi)以及安全性和共享性等問題;建立兩級(jí)瓦片文件訪問機(jī)制,提供瓦片文件的多并發(fā)訪問,保證多用戶多并發(fā)情況下的數(shù)據(jù)訪問穩(wěn)定。本文探索性地將Hadoop技術(shù)引入GIS系統(tǒng),通過基于Hadoop的云技術(shù)和架構(gòu)提升電子地圖瓦片的存儲(chǔ)效率、傳輸效率,設(shè)計(jì)并實(shí)現(xiàn)一種具有創(chuàng)新性的瓦片文件的緊湊型組織方式,并在此基礎(chǔ)上發(fā)布電子地圖瓦片,對(duì)外提供基礎(chǔ)性云GIS服務(wù),所研發(fā)的基于Hadoop架構(gòu)的GIS云計(jì)算與云存儲(chǔ)系統(tǒng)具有良好的實(shí)用性。
【圖文】：

圖 1. 1 云計(jì)算的基本應(yīng)用模式圖Fig 1.1 The basic application pattern of cloud computing、歐盟、韓國(guó)以及日本等發(fā)達(dá)國(guó)家都在大力推動(dòng)云計(jì)臺(tái)了《聯(lián)邦云計(jì)算戰(zhàn)略》，旨在鼓勵(lì)技術(shù)創(chuàng)新，推動(dòng)這一措施的推行讓云計(jì)算服務(wù)在美國(guó)政府單位的各部。與此同時(shí)，美國(guó)的各個(gè)大中型的互聯(lián)網(wǎng)企業(yè)，例如 IBM 等國(guó)際龍頭公司也在實(shí)行自己的云計(jì)算計(jì)劃，并與產(chǎn)品。亞馬遜網(wǎng)絡(luò)服務(wù)推出了 DaaS 產(chǎn)品 WorkSpa的 Cloud OS 云操作系統(tǒng)，同年十一月，云計(jì)算及跨hnologies 推出針對(duì) System z 的 CA 云存儲(chǔ)技術(shù)，該技上處理的數(shù)據(jù)轉(zhuǎn)移到云環(huán)境中，并進(jìn)行備份，，從而降在云計(jì)算方面也是走到世界的前列，早在 2012 年 5 月了《通信業(yè)“十二五”發(fā)展規(guī)劃》，明確表示將云計(jì)算進(jìn)行建設(shè)，推動(dòng)云服務(wù)在各行各業(yè)中的應(yīng)用。目前我

SMS 和文本消息。Social Inboxl 是用來替代上一代決實(shí)時(shí)的信息服務(wù)。Facebook 每個(gè)月需要存儲(chǔ) 10短期小批量的臨時(shí)數(shù)據(jù)以及長(zhǎng)期增長(zhǎng)但是很少被訪擇 Hadoop 以及 HBase 主要基于以下特點(diǎn)：的一致性模型比 Cassandra 更簡(jiǎn)單；列的 key-value 存儲(chǔ)系統(tǒng)，擅長(zhǎng)用 key 來掃描并獲模式，有更好的性能和擴(kuò)展性；層數(shù)據(jù)存儲(chǔ)使用的是 HDFS，能夠提供自動(dòng)負(fù)載平六大存儲(chǔ)架構(gòu)直使用 MySQL 作為存儲(chǔ)架構(gòu)的核心，但是隨著數(shù)來越繁雜，基于 NoSQL 和分布式的云計(jì)算平臺(tái)更e 的低延時(shí)，Twitter 可以為用戶提供穩(wěn)定可靠的實(shí)主要使用的存儲(chǔ)架構(gòu)占比如下：
【學(xué)位授予單位】：合肥工業(yè)大學(xué)
【學(xué)位級(jí)別】：碩士
【學(xué)位授予年份】：2018
【分類號(hào)】：P208

【參考文獻(xiàn)】

相關(guān)期刊論文 前10條

1 李偉;;電子地圖在大數(shù)據(jù)政工領(lǐng)域的應(yīng)用[J];無線互聯(lián)科技;2015年13期

2 黎文陽(yáng);;大數(shù)據(jù)處理模型Apache Spark研究[J];現(xiàn)代計(jì)算機(jī)(專業(yè)版);2015年08期

3 董春濤;李文婷;沈晴霓;吳中海;;Hadoop YARN大數(shù)據(jù)計(jì)算框架及其資源調(diào)度機(jī)制研究[J];信息通信技術(shù);2015年01期

4 宋繼紅;李夢(mèng)楠;郝得智;;基于Hadoop分布式文件系統(tǒng)的單點(diǎn)問題的研究[J];軟件工程師;2014年12期

5 劉鵬;趙羲;史宜南;;ArcGIS Server平臺(tái)下地圖瓦片存儲(chǔ)關(guān)鍵技術(shù)研究[J];地理空間信息;2014年05期

6 楊光;;各國(guó)云計(jì)算產(chǎn)業(yè)發(fā)展扶持政策盤點(diǎn)[J];計(jì)算機(jī)與網(wǎng)絡(luò);2014年Z1期

7 洪旭升;林世平;;基于MapFile的HDFS小文件存儲(chǔ)效率問題[J];計(jì)算機(jī)系統(tǒng)應(yīng)用;2012年11期

8 蘇旭明;譚建成;;WebGIS中瓦片地圖關(guān)鍵技術(shù)研究[J];北京測(cè)繪;2012年02期

9 蒙琳;張衍毓;;ArcGIS與MapGIS在土地利用規(guī)劃制圖中的比較[J];中國(guó)土地科學(xué);2012年04期

10 王晟;趙壁芳;;云計(jì)算中MapReduce技術(shù)研究[J];通信技術(shù);2011年12期

相關(guān)博士學(xué)位論文 前1條

1 范建永;基于Hadoop的云GIS若干關(guān)鍵技術(shù)研究[D];解放軍信息工程大學(xué);2013年

相關(guān)碩士學(xué)位論文 前10條

1 孫佳麗;Web應(yīng)用中的客戶端緩存技術(shù)研究[D];首都經(jīng)濟(jì)貿(mào)易大學(xué);2016年

2 高宗寶;基于HDFS的海量小文件讀寫策略研究[D];山東大學(xué);2016年

3 高];基于云計(jì)算的GIS數(shù)據(jù)存儲(chǔ)管理研究[D];合肥工業(yè)大學(xué);2016年

4 湯辰;基于HDFS的小文件存儲(chǔ)方法的研究與應(yīng)用[D];燕山大學(xué);2015年

5 賈玉辰;Hadoop中海量小文件存取關(guān)鍵技術(shù)的研究與實(shí)現(xiàn)[D];南京郵電大學(xué);2015年

6 萬(wàn)家雪;Hadoop平臺(tái)運(yùn)維關(guān)鍵技術(shù)研究與實(shí)現(xiàn)[D];北京郵電大學(xué);2015年

7 秦滔;Hadoop分布式架構(gòu)的研究與實(shí)際應(yīng)用[D];北京郵電大學(xué);2015年

8 每春輝;基于Hadoop的多版本柵格地圖存儲(chǔ)與管理系統(tǒng)[D];西安電子科技大學(xué);2014年

9 王錚;基于Hadoop的分布式系統(tǒng)研究與應(yīng)用[D];吉林大學(xué);2014年

10 盧俊華;HDFS存儲(chǔ)機(jī)制的分析與研究[D];武漢理工大學(xué);2014年

本文編號(hào)：2645499