本文關鍵詞：基于云計算的土地利用矢量數(shù)據(jù)高效處理技術研究，由筆耕文化傳播整理發(fā)布。

【摘要】：土地利用矢量數(shù)據(jù)是土地調查產生的成果數(shù)據(jù),是土地利用狀況分析評價的數(shù)據(jù)基礎,也是國土資源部門把握土地利用情況的重要依據(jù)。當前,全國大部分省級土地利用現(xiàn)狀管理系統(tǒng)采用關系型數(shù)據(jù)庫與ArcSDE協(xié)同管理空間數(shù)據(jù),如Oracle+ArcSDE、SQL Server+ArcSDE等方式,上述方法中土地利用矢量數(shù)據(jù)存儲在單臺服務器上,極大的限制了數(shù)據(jù)的安全性和計算能力。隨著土地調查的深入,我國各省份土地利用矢量數(shù)據(jù)不斷增加,傳統(tǒng)的數(shù)據(jù)管理方法已不能滿足土地利用矢量數(shù)據(jù)存儲、管理的需求,也嚴重制約了土地利用矢量數(shù)據(jù)的分析和處理效率。為了提高土地利用矢量數(shù)據(jù)的管理與計算效率,本文在研究云計算技術與現(xiàn)有的土地利用矢量數(shù)據(jù)特點的基礎上,對云環(huán)境下的土地利用矢量數(shù)據(jù)的存儲與計算進行了深入的研究,本文主要研究內容有以下幾點：1.設計了云環(huán)境下的省級土地利用矢量數(shù)據(jù)組織方法,即按縣級行政區(qū)分層存儲,并將縣級行政區(qū)邊界存儲到文件中,以便于進行跨縣的空間操作。對于土地利用矢量數(shù)據(jù)的存儲,本文采用遵循WKT標準的TSV格式,將屬性數(shù)據(jù)與空間數(shù)據(jù)存儲在同一個文件中。2.研究了云環(huán)境下的土地利用矢量數(shù)據(jù)并行導入方法,通過Sqoop與基于GDAL開發(fā)的數(shù)據(jù)并行導入工具協(xié)同運行的方式,實現(xiàn)從關系型數(shù)據(jù)庫、S hapefile、 MDB等數(shù)據(jù)源中并行導入數(shù)據(jù)。3.研究了云環(huán)境下的土地利用矢量數(shù)據(jù)四叉樹索引的批量并行創(chuàng)建方法,以提高空間索引創(chuàng)建的效率。4.設計了一套基于Spark技術對存儲在HDFS上的土地利用矢量數(shù)據(jù)進行空間查詢、屬性統(tǒng)計以及空間疊加分析的一體化解決方案。最后,在研究內容基礎上,開發(fā)了云計算支持下的浙江省省級土地利用現(xiàn)狀管理實驗系統(tǒng),并與原來基于Oracle和ArcSDE管理土地利用矢量數(shù)據(jù)的系統(tǒng)進行了性能對比。結果表明,基于Spark的土地利用現(xiàn)狀管理實驗系統(tǒng)更適合對海量土地利用矢量數(shù)據(jù)的管理和分析。
【關鍵詞】：云計算 矢量數(shù)據(jù) Spark 土地利用
【學位授予單位】：浙江大學
【學位級別】：碩士
【學位授予年份】：2015
【分類號】：P208;P209
【目錄】：

• 致謝5-6
• 摘要6-7
• Abstract7-11
• 1 緒論11-20
• 1.1 研究背景11-12
• 1.2 研究意義12-13
• 1.3 研究現(xiàn)狀13-17
• 1.3.1 土地利用數(shù)據(jù)庫研究現(xiàn)狀13-14
• 1.3.2 云計算技術在空間數(shù)據(jù)領域的應用14-17
• 1.4 研究內容17-18
• 1.5 研究路線與章節(jié)安排18-20
• 2 云環(huán)境下的土地利用矢量數(shù)據(jù)組織與存儲20-34
• 2.1 土地利用矢量數(shù)據(jù)云存儲文件系統(tǒng)20-24
• 2.2 土地利用矢量數(shù)據(jù)結構與組織方式24-31
• 2.2.1 土地利用矢量數(shù)據(jù)結構24-26
• 2.2.2 云環(huán)境下的土地利用矢量數(shù)據(jù)模型26-28
• 2.2.3 土地利用矢量數(shù)據(jù)組織28-31
• 2.3 土地利用矢量數(shù)據(jù)云存儲的實現(xiàn)31-33
• 2.4 本章小結33-34
• 3 云環(huán)境下的土地利用矢量數(shù)據(jù)并行化處理方法34-52
• 3.1 土地利用矢量數(shù)據(jù)并行計算引擎34-37
• 3.2 云環(huán)境下的土地利用矢量數(shù)據(jù)并行導入技術37-40
• 3.2.1 土地利用矢量數(shù)據(jù)導入工具——Sqoop37-39
• 3.2.2 土地利用矢量數(shù)據(jù)并行導入工具39-40
• 3.3 云環(huán)境下的土地利用矢量數(shù)據(jù)空間索引批量并行構建方法40-44
• 3.3.1 四叉樹索引40-42
• 3.3.2 Spark批量并行創(chuàng)建四叉樹索引42-44
• 3.4 環(huán)境下的土地利用矢量數(shù)據(jù)高效處理技術44-51
• 3.4.1 云環(huán)境下的土地利用矢量數(shù)據(jù)空間查詢44-46
• 3.4.2 云環(huán)境下的土地利用矢量數(shù)據(jù)屬性統(tǒng)計46-49
• 3.4.3 云環(huán)境下的土地利用矢量數(shù)據(jù)疊加分析49-51
• 3.5 本章小結51-52
• 4 云計算支持下的浙江省省級土地利用現(xiàn)狀管理實驗系統(tǒng)52-61
• 4.1 系統(tǒng)架構52-53
• 4.2 系統(tǒng)運行環(huán)境53-54
• 4.2.1 硬件環(huán)境53
• 4.2.2 軟件環(huán)境53-54
• 4.3 系統(tǒng)運行示例54-56
• 4.3.1 數(shù)據(jù)瀏覽54
• 4.3.2 數(shù)據(jù)管理54-55
• 4.3.3 節(jié)點監(jiān)控55-56
• 4.4 實驗結果及分析56-59
• 4.4.1 空間查詢56-57
• 4.4.2 統(tǒng)計匯總57-58
• 4.4.3 圖層疊加分析58-59
• 4.5 本章小結59-61
• 5 結論與展望61-64
• 5.1 工作總結61-62
• 5.2 研究特色62-63
• 5.3 展望63-64
• 參考文獻64-68
• 作者簡介68

【參考文獻】

中國期刊全文數(shù)據(jù)庫 前10條

1 萬奇靈;侯方國;;基于ArcGIS的大比例尺土地調查數(shù)據(jù)庫建庫設計[J];安徽農學通報;2007年16期

2 程瑤;劉耀林;;石景山區(qū)土地利用數(shù)據(jù)庫的設計與實現(xiàn)[J];測繪科學;2012年02期

3 李建江;崔健;王聃;嚴林;黃義雙;;MapReduce并行編程模型研究綜述[J];電子學報;2011年11期

4 劉旭輝;韓冀中;賀勁;韓承德;;基于集群系統(tǒng)的空間數(shù)據(jù)并行處理策略研究[J];高技術通訊;2009年10期

5 陳崇成;林劍峰;吳小竹;巫建偉;連惠群;;基于NoSQL的海量空間數(shù)據(jù)云存儲與服務方法[J];地球信息科學學報;2013年02期

6 張定祥;陳宏磊;季宏偉;李士江;付強;;全國土地利用格網(wǎng)數(shù)據(jù)生產技術方法探討[J];國土資源信息化;2014年02期

7 屈紅剛,潘懋,王勇,胡金星;設計模式在GIS軟件開發(fā)中的應用研究[J];計算機工程與應用;2003年25期

8 欒亞建;黃爛，

本文編號：423697