天堂国产午夜亚洲专区-少妇人妻综合久久蜜臀-国产成人户外露出视频在线-国产91传媒一区二区三区

當(dāng)前位置:主頁(yè) > 科技論文 > 測(cè)繪論文 >

云計(jì)算環(huán)境下多源異構(gòu)遙感大數(shù)據(jù)管理關(guān)鍵技術(shù)研究

發(fā)布時(shí)間:2020-07-07 01:31
【摘要】:隨著遙感衛(wèi)星技術(shù)的不斷發(fā)展,一方面造成了遙感衛(wèi)星傳感器、遙感數(shù)據(jù)類型的不斷增加,另一方面也導(dǎo)致了遙感數(shù)據(jù)體量的急劇增長(zhǎng),這給遙感數(shù)據(jù)的管理、存儲(chǔ)與組織帶來了巨大的挑戰(zhàn),與此同時(shí),由于遙感數(shù)據(jù)本身所具有的時(shí)空等多維度特征,越來越多的遙感應(yīng)用開始關(guān)注于利用遙感數(shù)據(jù)集的時(shí)間等維度進(jìn)行分析與處理,而在現(xiàn)有的多衛(wèi)星數(shù)據(jù)中心云計(jì)算環(huán)境下,數(shù)據(jù)的獲取、分享與時(shí)序數(shù)據(jù)組織分析效率低下。因此如何進(jìn)行云計(jì)算環(huán)境下的多源遙感大數(shù)據(jù)管理,從而為用戶提供對(duì)于時(shí)空數(shù)據(jù)集的高效的按需獲取、數(shù)據(jù)共享、時(shí)序數(shù)據(jù)組織等服務(wù),是當(dāng)前遙感數(shù)據(jù)管理領(lǐng)域亟需解決的重要問題。針對(duì)以上問題,本文依托于“863項(xiàng)目—星機(jī)地綜合定量遙感系統(tǒng)與應(yīng)用示范(二期)”項(xiàng)目,利用云計(jì)算的海量數(shù)據(jù)存儲(chǔ)、虛擬化、彈性擴(kuò)展、按需服務(wù)等優(yōu)點(diǎn),針對(duì)多源異構(gòu)大數(shù)據(jù)的數(shù)據(jù)量大、數(shù)據(jù)組織困難、數(shù)據(jù)服務(wù)低效等特點(diǎn),重點(diǎn)研究了云計(jì)算環(huán)境下針對(duì)遙感數(shù)據(jù)分析應(yīng)用用戶的多源遙感數(shù)據(jù)的存儲(chǔ)、組織、數(shù)據(jù)按需訂閱、數(shù)據(jù)共享等服務(wù)的具體實(shí)現(xiàn)以及在此基礎(chǔ)上的數(shù)據(jù)立方體分析環(huán)境的構(gòu)建。主要包括以下幾點(diǎn):(1)對(duì)于來自不同數(shù)據(jù)源的異構(gòu)遙感數(shù)據(jù),通過引入地理信息元數(shù)據(jù)標(biāo)準(zhǔn)建立元數(shù)據(jù)映射模板,實(shí)現(xiàn)多源遙感數(shù)據(jù)的統(tǒng)一格式轉(zhuǎn)換,并在此基礎(chǔ)上實(shí)現(xiàn)對(duì)于遙感數(shù)據(jù)的統(tǒng)一檢索。另外按照歸檔數(shù)據(jù)以及計(jì)算分析數(shù)據(jù)的不同特點(diǎn),為遙感影像數(shù)據(jù)的存儲(chǔ)采取不同的組織方式。(2)針對(duì)遙感數(shù)據(jù)的按需獲取與數(shù)據(jù)共享服務(wù),本文在OpenStack-Swift對(duì)象存儲(chǔ)的基礎(chǔ)上,首先提出了基于對(duì)象文件的虛擬目錄設(shè)計(jì)方案,為用戶提供了類似于文件系統(tǒng)的可以進(jìn)行層級(jí)目錄管理的云空間,然后提出了虛擬映射與虛擬視圖的概念,通過共享數(shù)據(jù)存儲(chǔ)與虛擬視圖組織來為用戶提供高效的時(shí)空數(shù)據(jù)訂閱與數(shù)據(jù)共享服務(wù)。(3)針對(duì)多維遙感數(shù)據(jù)的數(shù)據(jù)處理與分析,本文結(jié)合Open Data Cube數(shù)據(jù)立方體技術(shù),利用云存儲(chǔ)中的組織好的Landsat、Modis、GF等時(shí)空數(shù)據(jù)集,為用戶提供了基于內(nèi)存的多維數(shù)據(jù)模型構(gòu)建與時(shí)序數(shù)據(jù)分析環(huán)境,并通過NDVI以及水體檢測(cè)算法為例進(jìn)行了驗(yàn)證。通過開展以上研究,本文實(shí)現(xiàn)了對(duì)于異構(gòu)多源遙感數(shù)據(jù)的統(tǒng)一管理,并在此基礎(chǔ)上,為遙感云平臺(tái)中的數(shù)據(jù)分析用戶提供了云空間數(shù)據(jù)組織、時(shí)空數(shù)據(jù)訂閱、數(shù)據(jù)共享等服務(wù),并通過數(shù)據(jù)立方體為用戶構(gòu)建了時(shí)序數(shù)據(jù)的分析環(huán)境,為用戶針對(duì)多源異構(gòu)數(shù)據(jù)的統(tǒng)一檢索、組織、訂閱共享以及分析處理提供了系統(tǒng)而完整的解決方案。本文的創(chuàng)新點(diǎn)在于通過參考元數(shù)據(jù)相關(guān)標(biāo)準(zhǔn)構(gòu)建了統(tǒng)一元數(shù)據(jù)模型從而實(shí)現(xiàn)了對(duì)于多源異構(gòu)遙感數(shù)據(jù)組織及數(shù)據(jù)檢索服務(wù)。通過對(duì)于云存儲(chǔ)以及虛擬映射組織的研究,實(shí)現(xiàn)了面向多用戶的時(shí)空數(shù)據(jù)集訂閱及共享服務(wù),有效避免了數(shù)據(jù)共享時(shí)候的數(shù)據(jù)傳輸與重復(fù)組織,保證用戶能夠高效而便捷的獲取到所需的數(shù)據(jù)。
【學(xué)位授予單位】:中國(guó)科學(xué)院大學(xué)(中國(guó)科學(xué)院遙感與數(shù)字地球研究所)
【學(xué)位級(jí)別】:碩士
【學(xué)位授予年份】:2018
【分類號(hào)】:P237
【圖文】:

遙感影像,多維時(shí)空,數(shù)組,多維數(shù)據(jù)模型


圖 2.1 多維時(shí)空數(shù)組分析模式E Data Cube 實(shí)現(xiàn)了對(duì)于多維遙感時(shí)空數(shù)據(jù)集的數(shù)據(jù)模型表征以及時(shí)空序列分析而對(duì)于歸檔的遙感影像數(shù)據(jù)需要將其先轉(zhuǎn)化為多維數(shù)組的格式導(dǎo)入數(shù)據(jù)庫(kù)中進(jìn)這極大的增加了海量數(shù)據(jù)歸檔時(shí)的時(shí)間開銷以及存儲(chǔ)開銷,另外對(duì)于多源遙感的異構(gòu)性問題,INPE Data Cube 并沒有給出較好的易擴(kuò)展的數(shù)據(jù)管理方案。2) AGDCstralian Geoscience Data Cube(AGDC)是澳大利亞地球科學(xué)中心研發(fā)的一套針感時(shí)空數(shù)據(jù)的歸檔以及分析的數(shù)據(jù)立方體系統(tǒng),支持多種多源異構(gòu)的遙感數(shù)據(jù)有較強(qiáng)的可擴(kuò)展性[53]。其底層利用文件存儲(chǔ)的格式來管理遙感影像數(shù)據(jù),通過據(jù)庫(kù)來管理遙感元數(shù)據(jù)。對(duì)于多維數(shù)據(jù)模型的構(gòu)建,AGDC 沒有使用在物理存多維數(shù)據(jù)模型的方案,而是利用元數(shù)據(jù)庫(kù)來組織管理遙感影像數(shù)據(jù)文件,先通像文件的數(shù)據(jù)鏈接以及元數(shù)據(jù)信息構(gòu)成一個(gè)邏輯上的多維數(shù)據(jù)模型,之后將所件讀入內(nèi)存中構(gòu)建為基于多維數(shù)組的時(shí)空多維數(shù)據(jù)模型,其中的維度包括數(shù)據(jù)間,空間,波段,分辨率等,這使得該時(shí)空數(shù)據(jù)模型在數(shù)據(jù)抽取和計(jì)算上十分

遙感影像,架構(gòu)設(shè)計(jì)


圖 2.2 AGDC 架構(gòu)設(shè)計(jì)采用元數(shù)據(jù)來組織管理歸檔的遙感影像數(shù)據(jù),AGDC 具有良好的可擴(kuò)展性,遙感影像數(shù)據(jù),無需對(duì)影像數(shù)據(jù)本身進(jìn)行格式轉(zhuǎn)化,只需將元數(shù)據(jù)提取并歸即可。另一方面,AGDC 團(tuán)隊(duì)對(duì)外提供了開源版本的數(shù)據(jù)立方體 OpenDataC得到了許多國(guó)際組織與研究機(jī)構(gòu)的支持與合作,例如地球觀測(cè)衛(wèi)星委員會(huì)(C上構(gòu)建了自己的數(shù)據(jù)立方體數(shù)據(jù)管理與分析系統(tǒng)。OpenDataCube 目前仍然改進(jìn)中,下一步的計(jì)劃是利用 AmazonS3 提供的云存儲(chǔ)以及計(jì)算資源建立數(shù)析平臺(tái),為全球用戶提供便捷的大規(guī)模多維時(shí)空數(shù)據(jù)分析服務(wù)。章小結(jié)首先簡(jiǎn)述了隨著遙感技術(shù)發(fā)展多源遙感數(shù)據(jù)管理所面臨的諸多問題,在論述據(jù)組織與存儲(chǔ)的幾種主要方案的基礎(chǔ)上,首先說明了目前常用的多源異構(gòu)遙理方法;然后綜合分析了目前對(duì)于多源遙感數(shù)據(jù)的時(shí)空數(shù)據(jù)集組織與共享的其所面臨的若干問題與不足;最后分析了多維遙感數(shù)據(jù)時(shí)空序列分析的應(yīng)用

示意圖,格網(wǎng),三級(jí),示意圖


第三章 基于元數(shù)據(jù)模板映射的多源遙感數(shù)據(jù)統(tǒng)一組織型,GLTS(ClobalLogicalTileScheme)格網(wǎng)模型[60],在 UTM 投影(Unercator Projection)下按照2 × 2 +1的全球經(jīng)緯度網(wǎng)格進(jìn)行劃分。其中初網(wǎng)格,然后每個(gè)網(wǎng)格cell在通過四叉樹劃分得到子單元,形成更低的一級(jí)格。其中每個(gè)網(wǎng)格可以通過格網(wǎng)的行列號(hào)來獲取。

【參考文獻(xiàn)】

相關(guān)期刊論文 前7條

1 吳炳方;邢強(qiáng);;遙感的科學(xué)推動(dòng)作用與重點(diǎn)應(yīng)用領(lǐng)域[J];地球科學(xué)進(jìn)展;2015年07期

2 徐保民;倪旭光;;云計(jì)算發(fā)展態(tài)勢(shì)與關(guān)鍵技術(shù)進(jìn)展[J];中國(guó)科學(xué)院院刊;2015年02期

3 宋維靜;劉鵬;王力哲;呂科;;遙感大數(shù)據(jù)的智能處理:現(xiàn)狀與挑戰(zhàn)[J];工程研究-跨學(xué)科視野中的工程;2014年03期

4 李加林;曹羅丹;浦瑞良;;洪澇災(zāi)害遙感監(jiān)測(cè)評(píng)估研究綜述[J];水利學(xué)報(bào);2014年03期

5 陳全;鄧倩妮;;云計(jì)算及其關(guān)鍵技術(shù)[J];計(jì)算機(jī)應(yīng)用;2009年09期

6 艾海濱,孟令奎,林志勇;基于XML的分布式異構(gòu)地理數(shù)據(jù)集成與共享[J];遙感信息;2002年04期

7 駱劍承,周成虎,梁怡,裴韜;時(shí)空數(shù)據(jù)智能化處理與分析的理論和方法探討[J];中國(guó)圖象圖形學(xué)報(bào);2001年09期



本文編號(hào):2744440

資料下載
論文發(fā)表

本文鏈接:http://sikaile.net/kejilunwen/dizhicehuilunwen/2744440.html


Copyright(c)文論論文網(wǎng)All Rights Reserved | 網(wǎng)站地圖 |

版權(quán)申明:資料由用戶c5c2c***提供,本站僅收錄摘要或目錄,作者需要?jiǎng)h除請(qǐng)E-mail郵箱bigeng88@qq.com