天堂国产午夜亚洲专区-少妇人妻综合久久蜜臀-国产成人户外露出视频在线-国产91传媒一区二区三区

當(dāng)前位置:主頁 > 科技論文 > 自動(dòng)化論文 >

基于Spark的遙感大數(shù)據(jù)高效索引系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)研究

發(fā)布時(shí)間:2022-08-06 20:54
  隨著現(xiàn)代遙感技術(shù)的發(fā)展,產(chǎn)生了大量的多源異構(gòu)遙感數(shù)據(jù)。因此,遙感大數(shù)據(jù)的存儲(chǔ)和挖掘成為遙感應(yīng)用程序的重點(diǎn),這導(dǎo)致越來越多的遙感數(shù)據(jù)處理系統(tǒng)被遷移到大數(shù)據(jù)和云計(jì)算環(huán)境,例如Google的GEE和ARCGIS ONLINE;趶(qiáng)大計(jì)算能力和出色可擴(kuò)展性能的大數(shù)據(jù)系統(tǒng),我們可以深入研究遙感數(shù)據(jù),充分發(fā)揮資源價(jià)值,并實(shí)現(xiàn)對(duì)地面環(huán)境災(zāi)難的實(shí)時(shí)預(yù)測(cè)和監(jiān)視。遙感大數(shù)據(jù)的存儲(chǔ)主要用于原始數(shù)據(jù)的存儲(chǔ),元數(shù)據(jù)的存儲(chǔ)和索引系統(tǒng)。系統(tǒng)將元數(shù)據(jù)存儲(chǔ)在PostgreSQL中,將原始數(shù)據(jù)存儲(chǔ)在HDFS中,然后在原始數(shù)據(jù)存儲(chǔ)上建立索引系統(tǒng)以加快數(shù)據(jù)查詢。但是,由于查詢操作中涉及的數(shù)據(jù)不同,因此當(dāng)查詢數(shù)據(jù)量不同時(shí),單個(gè)索引系統(tǒng)通常具有不同的查詢效率。在大多數(shù)遙感系統(tǒng)中,索引系統(tǒng)的設(shè)計(jì)和實(shí)現(xiàn)并未考慮系統(tǒng)本身的機(jī)制或組件的使用,這進(jìn)一步影響了查詢和資源使用的效率。本文提出了一種新型的存儲(chǔ)系統(tǒng)MIGIS。MIGIS通過在數(shù)據(jù)查詢中使用HDFS的多副本機(jī)制集成了多種索引算法,包括四叉樹,GeoHash和十字鏈表。并優(yōu)化了各種索引數(shù)據(jù)結(jié)構(gòu)和查詢算法,以提高其查詢速度。并在不同的查詢數(shù)據(jù)量下選擇了相應(yīng)的查詢算法,有效克服了不同查... 

【文章頁數(shù)】:68 頁

【學(xué)位級(jí)別】:碩士

【文章目錄】:
摘要
abstract
第1章 引言
    1.1 研究背景與意義
    1.2 國(guó)內(nèi)外研究現(xiàn)狀
        1.2.1 遙感信息系統(tǒng)
        1.2.2 遙感數(shù)據(jù)索引
    1.3 研究?jī)?nèi)容及主要貢獻(xiàn)
    1.4 論文的組織結(jié)構(gòu)
第2章 背景知識(shí)介紹
    2.1 大數(shù)據(jù)組件
        2.1.1 大數(shù)據(jù)存儲(chǔ)
        2.1.2 大數(shù)據(jù)計(jì)算
        2.1.3 大數(shù)據(jù)資源管理及協(xié)調(diào)
    2.2 遙感信息系統(tǒng)
        2.2.1 遙感存儲(chǔ)系統(tǒng)
        2.2.2 遙感處理系統(tǒng)
        2.2.3 遙感信息系統(tǒng)分析
    2.3 本章小結(jié)
第3章 MIGIS多索引系統(tǒng)設(shè)計(jì)
    3.1 MIGIS設(shè)計(jì)目標(biāo)和原則
        3.1.1 多索引系統(tǒng)優(yōu)勢(shì)
        3.1.2 索引算法選擇
    3.2 MIGIS索引算法優(yōu)化
        3.2.1 四叉樹優(yōu)化算法
        3.2.2 GeoHash編碼算法
        3.2.3 十字鏈優(yōu)化算法
    3.3 MIGIS系統(tǒng)集成
        3.3.1 MIGIS存儲(chǔ)系統(tǒng)
        3.3.2 MIGIS處理系統(tǒng)
    3.4 本章小結(jié)
第4章 MIGIS系統(tǒng)實(shí)現(xiàn)與性能評(píng)價(jià)
    4.1 系統(tǒng)實(shí)現(xiàn)與處理流程
        4.1.1 原型系統(tǒng)實(shí)現(xiàn)
        4.1.2 處理流程
    4.2 實(shí)驗(yàn)設(shè)計(jì)和結(jié)果分析
        4.2.1 實(shí)驗(yàn)數(shù)據(jù)
        4.2.2 系統(tǒng)完整性
        4.2.3 遙感信息系統(tǒng)性能分析
        4.2.4 多索引系統(tǒng)性能分析
    4.3 本章小結(jié)
第5章 結(jié)束語
    5.1 本文工作總結(jié)
    5.2 下一步研究方向
參考文獻(xiàn)
致謝
作者簡(jiǎn)介及攻讀學(xué)位期間發(fā)表的學(xué)術(shù)論文與研究成果


【參考文獻(xiàn)】:
期刊論文
[1]基于GIS的水文生態(tài)空間數(shù)據(jù)庫(kù)及管理系統(tǒng)研發(fā)[J]. 徐斌,張艷.  水生態(tài)學(xué)雜志. 2018(05)
[2]遙感大數(shù)據(jù)研究現(xiàn)狀與發(fā)展趨勢(shì)[J]. 朱建章,石強(qiáng),陳鳳娥,史曉丹,董澤民,秦前清.  中國(guó)圖象圖形學(xué)報(bào). 2016(11)



本文編號(hào):3670349

資料下載
論文發(fā)表

本文鏈接:http://sikaile.net/kejilunwen/zidonghuakongzhilunwen/3670349.html


Copyright(c)文論論文網(wǎng)All Rights Reserved | 網(wǎng)站地圖 |

版權(quán)申明:資料由用戶6acb3***提供,本站僅收錄摘要或目錄,作者需要?jiǎng)h除請(qǐng)E-mail郵箱bigeng88@qq.com