【摘要】：在最近的幾十年里,GIS(地理信息系統(tǒng))技術(shù)取得了巨大的進(jìn)步,應(yīng)用也日趨廣泛和深化。作為GIS數(shù)據(jù)中的一種重要數(shù)據(jù)格式,地圖瓦片文件的存儲與管理也愈發(fā)得到人們的關(guān)注。早期的GIS運行在單機系統(tǒng)上,主要以文件方式來管理瓦片文件,隨著計算機技術(shù)和Internet的發(fā)展,瓦片文件的管理逐漸走向網(wǎng)絡(luò)化以及分布式。瓦片地圖技術(shù)采用了“以空間換取時間”的策略,從而提供快速的地圖服務(wù),給用戶帶來了更好的體驗。這種策略帶來了磁盤空間浪費、瓦片文件安全性和共享性差等問題。因此針對瓦片文件數(shù)據(jù)量大,文件小,結(jié)構(gòu)嚴(yán)格等特點,結(jié)合Hadoop分布式框架的特性,本文研究并設(shè)計了一套基于Hadoop的瓦片文件管理方案。從瓦片文件的組織方式和存儲方式對瓦片文件的管理進(jìn)行研究,在對比分析了目前主流的幾種瓦片文件管理方法后,從以下幾個方面開展工作:在對瓦片文件結(jié)構(gòu)分析的基礎(chǔ)上,設(shè)計并實現(xiàn)一套瓦片緊湊方法,將原有的松散瓦片文件轉(zhuǎn)化為緊湊瓦片文件;建立瓦片文件的兩級索引機制,為第三方GIS平臺或用戶訪問瓦片文件提供接口;實現(xiàn)瓦片文件在Hadoop中的分布式管理,解決瓦片文件存儲中磁盤空間浪費以及安全性和共享性等問題;建立兩級瓦片文件訪問機制,提供瓦片文件的多并發(fā)訪問,保證多用戶多并發(fā)情況下的數(shù)據(jù)訪問穩(wěn)定。本文探索性地將Hadoop技術(shù)引入GIS系統(tǒng),通過基于Hadoop的云技術(shù)和架構(gòu)提升電子地圖瓦片的存儲效率、傳輸效率,設(shè)計并實現(xiàn)一種具有創(chuàng)新性的瓦片文件的緊湊型組織方式,并在此基礎(chǔ)上發(fā)布電子地圖瓦片,對外提供基礎(chǔ)性云GIS服務(wù),所研發(fā)的基于Hadoop架構(gòu)的GIS云計算與云存儲系統(tǒng)具有良好的實用性。
【圖文】：

圖 1. 1 云計算的基本應(yīng)用模式圖Fig 1.1 The basic application pattern of cloud computing、歐盟、韓國以及日本等發(fā)達(dá)國家都在大力推動云計臺了《聯(lián)邦云計算戰(zhàn)略》，旨在鼓勵技術(shù)創(chuàng)新，推動這一措施的推行讓云計算服務(wù)在美國政府單位的各部。與此同時，美國的各個大中型的互聯(lián)網(wǎng)企業(yè)，例如 IBM 等國際龍頭公司也在實行自己的云計算計劃，并與產(chǎn)品。亞馬遜網(wǎng)絡(luò)服務(wù)推出了 DaaS 產(chǎn)品 WorkSpa的 Cloud OS 云操作系統(tǒng)，同年十一月，云計算及跨hnologies 推出針對 System z 的 CA 云存儲技術(shù)，該技上處理的數(shù)據(jù)轉(zhuǎn)移到云環(huán)境中，并進(jìn)行備份，，從而降在云計算方面也是走到世界的前列，早在 2012 年 5 月了《通信業(yè)“十二五”發(fā)展規(guī)劃》，明確表示將云計算進(jìn)行建設(shè)，推動云服務(wù)在各行各業(yè)中的應(yīng)用。目前我

SMS 和文本消息。Social Inboxl 是用來替代上一代決實時的信息服務(wù)。Facebook 每個月需要存儲 10短期小批量的臨時數(shù)據(jù)以及長期增長但是很少被訪擇 Hadoop 以及 HBase 主要基于以下特點：的一致性模型比 Cassandra 更簡單；列的 key-value 存儲系統(tǒng)，擅長用 key 來掃描并獲模式，有更好的性能和擴展性；層數(shù)據(jù)存儲使用的是 HDFS，能夠提供自動負(fù)載平六大存儲架構(gòu)直使用 MySQL 作為存儲架構(gòu)的核心，但是隨著數(shù)來越繁雜，基于 NoSQL 和分布式的云計算平臺更e 的低延時，Twitter 可以為用戶提供穩(wěn)定可靠的實主要使用的存儲架構(gòu)占比如下：
【學(xué)位授予單位】：合肥工業(yè)大學(xué)
【學(xué)位級別】：碩士
【學(xué)位授予年份】：2018
【分類號】：P208

【參考文獻(xiàn)】

相關(guān)期刊論文 前10條

1 李偉;;電子地圖在大數(shù)據(jù)政工領(lǐng)域的應(yīng)用[J];無線互聯(lián)科技;2015年13期

2 黎文陽;;大數(shù)據(jù)處理模型Apache Spark研究[J];現(xiàn)代計算機(專業(yè)版);2015年08期

3 董春濤;李文婷;沈晴霓;吳中海;;Hadoop YARN大數(shù)據(jù)計算框架及其資源調(diào)度機制研究[J];信息通信技術(shù);2015年01期

4 宋繼紅;李夢楠;郝得智;;基于Hadoop分布式文件系統(tǒng)的單點問題的研究[J];軟件工程師;2014年12期

5 劉鵬;趙羲;史宜南;;ArcGIS Server平臺下地圖瓦片存儲關(guān)鍵技術(shù)研究[J];地理空間信息;2014年05期

6 楊光;;各國云計算產(chǎn)業(yè)發(fā)展扶持政策盤點[J];計算機與網(wǎng)絡(luò);2014年Z1期

7 洪旭升;林世平;;基于MapFile的HDFS小文件存儲效率問題[J];計算機系統(tǒng)應(yīng)用;2012年11期

8 蘇旭明;譚建成;;WebGIS中瓦片地圖關(guān)鍵技術(shù)研究[J];北京測繪;2012年02期

9 蒙琳;張衍毓;;ArcGIS與MapGIS在土地利用規(guī)劃制圖中的比較[J];中國土地科學(xué);2012年04期

10 王晟;趙壁芳;;云計算中MapReduce技術(shù)研究[J];通信技術(shù);2011年12期

相關(guān)博士學(xué)位論文 前1條

1 范建永;基于Hadoop的云GIS若干關(guān)鍵技術(shù)研究[D];解放軍信息工程大學(xué);2013年

相關(guān)碩士學(xué)位論文 前10條

1 孫佳麗;Web應(yīng)用中的客戶端緩存技術(shù)研究[D];首都經(jīng)濟貿(mào)易大學(xué);2016年

2 高宗寶;基于HDFS的海量小文件讀寫策略研究[D];山東大學(xué);2016年

3 高];基于云計算的GIS數(shù)據(jù)存儲管理研究[D];合肥工業(yè)大學(xué);2016年

4 湯辰;基于HDFS的小文件存儲方法的研究與應(yīng)用[D];燕山大學(xué);2015年

5 賈玉辰;Hadoop中海量小文件存取關(guān)鍵技術(shù)的研究與實現(xiàn)[D];南京郵電大學(xué);2015年

6 萬家雪;Hadoop平臺運維關(guān)鍵技術(shù)研究與實現(xiàn)[D];北京郵電大學(xué);2015年

7 秦滔;Hadoop分布式架構(gòu)的研究與實際應(yīng)用[D];北京郵電大學(xué);2015年

8 每春輝;基于Hadoop的多版本柵格地圖存儲與管理系統(tǒng)[D];西安電子科技大學(xué);2014年

9 王錚;基于Hadoop的分布式系統(tǒng)研究與應(yīng)用[D];吉林大學(xué);2014年

10 盧俊華;HDFS存儲機制的分析與研究[D];武漢理工大學(xué);2014年

本文編號：2645499