本文關(guān)鍵詞：并行處理技術(shù)在地理信息數(shù)據(jù)處理中的應(yīng)用

  更多相關(guān)文章： 并行處理 MapReduce框架 主服務(wù)器集群 并行矢量數(shù)據(jù)模型 數(shù)據(jù)切片

【摘要】：隨著地理信息存儲量的飛速增長,傳統(tǒng)的單進(jìn)程、集中式的數(shù)據(jù)處理方式已不能滿足基于網(wǎng)絡(luò)的地理信息服務(wù)的效能要求。分析對比了OpenMP,MPI和MapReduce等主流并行編程模式,將關(guān)系型數(shù)據(jù)庫與分布式空間數(shù)據(jù)管理系統(tǒng)相結(jié)合,提出了面向并行處理的地理信息存儲模型和數(shù)據(jù)組織模型,將該模型與傳統(tǒng)模型進(jìn)行了對比分析,并基于MapReduce實現(xiàn)了地理空間數(shù)據(jù)并行處理框架,選取了矢量數(shù)據(jù)裝載、影像數(shù)據(jù)裝載以及數(shù)據(jù)切片作為典型數(shù)據(jù)處理案例開展對比實驗,該技術(shù)方案的處理效率均數(shù)倍于傳統(tǒng)技術(shù)方案。實驗表明,該模型能夠很好地支持并行處理框架,可為分布式環(huán)境下數(shù)據(jù)處理中心構(gòu)建提供一個有效解決方案。
【作者單位】： 信息工程大學(xué);地理信息工程國家重點實驗室;西安測繪研究所;
【關(guān)鍵詞】： 并行處理 MapReduce框架 主服務(wù)器集群 并行矢量數(shù)據(jù)模型 數(shù)據(jù)切片
【基金】：國家自然科學(xué)基金項目(41201469)
【分類號】：P208
【正文快照】： 隨著傳感器技術(shù)和數(shù)據(jù)獲取手段的不斷發(fā)展,影像數(shù)據(jù)的分辨率越來越高,實景數(shù)據(jù)等新型地理信息產(chǎn)品不斷涌現(xiàn),隨之而來的是數(shù)據(jù)存儲量呈級數(shù)增長所帶來的地理信息快速處理難題。地理信息處理主要包括數(shù)據(jù)格式轉(zhuǎn)換、坐標(biāo)系統(tǒng)轉(zhuǎn)換、分辨率轉(zhuǎn)換、數(shù)據(jù)壓縮、數(shù)據(jù)切片、空間索引創(chuàng)建

【相似文獻(xiàn)】

中國期刊全文數(shù)據(jù)庫 前10條

1 張德富;時桂發(fā);李濱宇;;并行處理計算機(jī)中存貯分配的幾個問題[J];南京大學(xué)學(xué)報(自然科學(xué)版);1985年04期

2 ;復(fù)旦大學(xué)并行處理研究所[J];高技術(shù)通訊;1997年10期

3 吳滄浦;系統(tǒng)優(yōu)化方法中的并行處理與神經(jīng)網(wǎng)絡(luò)技術(shù)[J];控制理論與應(yīng)用;1992年03期

4 田學(xué)文;并行處理計算機(jī)發(fā)展趨勢[J];科學(xué)中國人;1996年05期

5 吳婧瑾;吉家成;;美國伊利諾伊理工大學(xué)《并行處理》實驗教學(xué)探析[J];實驗科學(xué)與技術(shù);2013年06期

6 陳付龍,李明東;基于LAN的并行處理[J];四川師范學(xué)院學(xué)報(自然科學(xué)版);2003年01期

7 崔學(xué)群;;并行處理在石油勘探開發(fā)中的應(yīng)用(連載)[J];國外油氣勘探;1994年04期

8 巫小蓉,朱珍民;PVM特性(英文)[J];常德師范學(xué)院學(xué)報(自然科學(xué)版);2002年03期

9 樊興;張國平;夏學(xué)知;;一種實現(xiàn)動態(tài)負(fù)載均衡的多機(jī)情報并行處理方法[J];解放軍理工大學(xué)學(xué)報(自然科學(xué)版);2009年06期

10 雷樹梁;系統(tǒng)并行處理的集合分解方法[J];上海航天;1991年01期

中國重要會議論文全文數(shù)據(jù)庫 前10條

1 張校輝;趙昕;談滿堂;;流量特性在降低線卡并行處理需求中的應(yīng)用[A];2009年全國開放式分布與并行計算機(jī)學(xué)術(shù)會議論文集(下冊)[C];2009年

2 吳剛;楊夢冬;;RDF數(shù)據(jù)的并行處理及性能評價[A];第26屆中國數(shù)據(jù)庫學(xué)術(shù)會議論文集（B輯）[C];2009年

3 鮑平安;陳輝堂;;基于Petri網(wǎng)的并行處理模型[A];1997中國控制與決策學(xué)術(shù)年會論文集[C];1997年

4 何偉;崔立真;李保棟;;面向?qū)崟rROLAP應(yīng)用的并行處理方法[A];第29屆中國數(shù)據(jù)庫學(xué)術(shù)會議論文集（B輯）（NDBC2012）[C];2012年

5 丁云霞;胡善清;龍騰;;典型SAR算法在多核處理器上并行處理映射實現(xiàn)[A];第六屆全國信號和智能信息處理與應(yīng)用學(xué)術(shù)會議論文集[C];2012年

6 崔陽;呂志平;陳正生;王宇譜;呂浩;;GNSS數(shù)據(jù)的并行處理研究[A];第四屆中國衛(wèi)星導(dǎo)航學(xué)術(shù)年會論文集-S8衛(wèi)星導(dǎo)航模型與方法[C];2013年

7 趙宇亮;姚益平;;PDES同步控制多核并行處理研究[A];2009系統(tǒng)仿真技術(shù)及其應(yīng)用學(xué)術(shù)會議論文集[C];2009年

8 薛永生;黃震華;段江嬌;張延松;呂曉華;;一種并行處理多維連接和聚集操作的有效方法[A];第二十一屆中國數(shù)據(jù)庫學(xué)術(shù)會議論文集（研究報告篇）[C];2004年

9 楊敏;;基于mpi常用海洋數(shù)值模式并行處理的研究[A];中國高等教育學(xué)會教育信息化分會第十次學(xué)術(shù)年會論文集[C];2010年

10 張國珍;;CAD／CAPP集成與工藝文件并行處理的研究[A];12省區(qū)市機(jī)械工程學(xué)會2006年學(xué)術(shù)年會湖北省論文集[C];2006年

中國重要報紙全文數(shù)據(jù)庫 前2條

1 ;高效數(shù)據(jù)庫并行處理功能[N];計算機(jī)世界;2002年

2 本報駐華盛頓記者 張孟軍;善用閑置科技資源也是創(chuàng)新[N];科技日報;2002年

中國博士學(xué)位論文全文數(shù)據(jù)庫 前3條

1 劉峰;儀用主從耦合分布式并行處理容錯系統(tǒng)體系結(jié)構(gòu)研究[D];浙江大學(xué);2003年

2 王少榮;電力系統(tǒng)分布式廣域同步并行處理平臺研究[D];華中科技大學(xué);2004年

3 楊靖宇;攝影測量數(shù)據(jù)GPU并行處理若干關(guān)鍵技術(shù)研究[D];解放軍信息工程大學(xué);2011年

中國碩士學(xué)位論文全文數(shù)據(jù)庫 前10條

1 張偉新;基于異構(gòu)計算的IPv4/IPv6互通并行處理技術(shù)研究[D];華南理工大學(xué);2015年

2 李杰;面向領(lǐng)域的私有云并行處理模型研究[D];中國石油大學(xué)(華東);2014年

3 李聰欣;基于多核DSP的大前斜SAR并行實時處理技術(shù)研究[D];北京理工大學(xué);2016年

4 汪晨;嵌入式魚眼視頻校正方案的設(shè)計與實現(xiàn)[D];東南大學(xué);2015年

5 徐彬彬;面向迭代作業(yè)的分布式并行處理優(yōu)化與實現(xiàn)[D];華中科技大學(xué);2014年

6 馬倩;基于SYS/BIOS的彈載SAR并行處理研究[D];西安電子科技大學(xué);2015年

7 李想;氣象衛(wèi)星監(jiān)測數(shù)據(jù)報文并行處理關(guān)鍵技術(shù)研究[D];河南大學(xué);2016年

8 王美;粒子濾波并行處理的算法研究[D];西安電子科技大學(xué);2014年

9 蔡蓓;SAR數(shù)據(jù)地面并行處理硬件系統(tǒng)的設(shè)計與實現(xiàn)[D];中國科學(xué)院大學(xué)（工程管理與信息技術(shù)學(xué)院）;2014年

10 謝勵;多DSP并行處理模件研究[D];華中科技大學(xué);2007年

，

本文編號：644035