隨著大數(shù)據(jù)時代的到來,大數(shù)據(jù)對管理信息系統(tǒng)數(shù)據(jù)處理相關(guān)過程產(chǎn)生了非常大的影響,信息管理系統(tǒng)對數(shù)據(jù)的管理越來越精細化,大數(shù)據(jù)驅(qū)動下的管理工程已經(jīng)全面爆發(fā)。遙感技術(shù)已經(jīng)廣泛應用到社會工作的方方面面,如何在遙感大數(shù)據(jù)驅(qū)動下對其進行高效管理是我們目前最需要解決的問題。影像金字塔技術(shù)和分布式技術(shù)是管理影像大數(shù)據(jù)的關(guān)鍵技術(shù),可以實現(xiàn)影像大數(shù)據(jù)的高效讀取,對遙感影像的應用具有重要意義。本文主要研究遙感大數(shù)據(jù)驅(qū)動下影像金字塔數(shù)據(jù)的管理,具體包括影像金字塔構(gòu)建方法的研究和影像金字塔管理優(yōu)化等。其中影像金字塔構(gòu)建方法研究方面,首先針對多源、重疊區(qū)域的影像提出多分辨率影像分層策略,對不規(guī)則影像提出不規(guī)則分塊策略;其次構(gòu)建模板影像金字塔模型并對其進行Hilbert曲線編碼,利用父編碼+子編碼的方式對索引進行改進,從而實現(xiàn)影像的快速加載和顯示;最后通過對影像金字塔的增量更新研究實現(xiàn)了影像的更新替換。影像金字塔管理優(yōu)化方面,建立基于HBase的影像數(shù)據(jù)存儲結(jié)構(gòu),對其行鍵Row Key進行改進,并設計影像的快速讀取流程,實現(xiàn)影像塊的并行入庫。設置基于GeoWebCache緩存中間件的金字塔影像塊緩存區(qū),從而縮短影像... 

【文章來源】：東北林業(yè)大學黑龍江省 211工程院校 教育部直屬院校

【文章頁數(shù)】：63 頁

【學位級別】：碩士

【部分圖文】：

圖２－１高斯金字塔圖??

知范圍的空間等分成四個相等的子空間，如此遞歸下去，直到樹的層次可以滿足一定要??求或達到某種深度后停止劃分。四叉樹作為一種有效的數(shù)據(jù)結(jié)構(gòu)，不僅可以用來建立空??間數(shù)據(jù)的索引，它還可用于對柵格數(shù)據(jù)進行組織。四叉樹的一般圖形結(jié)構(gòu)如圖２－２所??示：??根節(jié)點??．?Ａ?Ａ??ｍｍ?ｍｍ??圖２－２四叉樹結(jié)構(gòu)圖??常規(guī)四叉樹也叫非線性四叉樹，即將柵格數(shù)據(jù)平均分成四份，即２ｎ＊２ｎ個，緊接著??檢查四份數(shù)據(jù)的灰度值，如果灰度值差超過可以接受的閾值，則繼續(xù)將該區(qū)域的數(shù)據(jù)平??均分成四份，一直到所在區(qū)域的灰度值差均在可接受的閾值內(nèi)。如圖２－３所示，四叉樹??－９?－??

圖２－６?ＨＤＦＳ系統(tǒng)架構(gòu)圖??一個標準的ＨＤＦＳ集群有３個守護進程組成，包括ＮａｍｅＮｏｄｅ、次ＮａｍｅＮｏｄｅ和多??個ＤａｔａＮｏｄｅ［３８］。ＨＤＦＳ系統(tǒng)架構(gòu)圖如圖２－６所示：??整個ＨＤＦＳ集群只有一個ＮａｍｅＮｏｄｅ，也是我們所說的主節(jié)點，它作為集群中的管??理節(jié)點對整個集群中的元數(shù)據(jù)信息進行存儲和管理，通過打開或關(guān)閉文件實現(xiàn)對文件系??統(tǒng)的名字空間的等相關(guān)操作，同時ＮａｍｅＮｏｄｅ節(jié)點也負責確定數(shù)據(jù)庫到某一個具體??ＤａｔａＮｏｄｅ節(jié)點的映射關(guān)系。所以，客戶端可以通過調(diào)用ＮａｍｅＮｏｄｅ主節(jié)點找到相關(guān)元??數(shù)據(jù)信息，從而可以找到相應的文件。此外，ＮａｍｅＮｏｄｅ還負責監(jiān)控檢查ＤａｔａＮｏｄｅ的??健康狀況，如果發(fā)現(xiàn)ＤａｔａＮｏｄｅ出現(xiàn)毛病，會踢出該節(jié)點并把數(shù)據(jù)拷貝到其它??ＤａｔａＮｏｄｅ?〇??次ＮａｍｅＮｏｄｅ的任務是協(xié)助ＮａｍｅＮｏｄｅ處理相關(guān)事務，主要通過對ＮａｍｅＮｏｄｅ內(nèi)事??務日志檢查點定期進行處理

【參考文獻】：
期刊論文
[1]云存儲環(huán)境的多副本數(shù)據(jù)完整性驗證方案[J]. 李昊宇,張龍軍,李慶鵬.  中國科技論文. 2017(14)
[2]面向Spark的遙感影像金字塔模型的并行構(gòu)建方法[J]. 黃冬梅,楊雨浩,梅海彬,王振華.  計算機應用與軟件. 2017(05)
[3]基于HBase的分布式空間數(shù)據(jù)庫技術(shù)[J]. 吳琰,唐小明.  吉林大學學報(理學版). 2016(06)
[4]遙感大數(shù)據(jù)研究現(xiàn)狀與發(fā)展趨勢[J]. 朱建章,石強,陳鳳娥,史曉丹,董澤民,秦前清.  中國圖象圖形學報. 2016(11)
[5]云計算中Hadoop技術(shù)研究與應用綜述[J]. 夏靖波,韋澤鯤,付凱,陳珍.  計算機科學. 2016(11)
[6]分布式存儲中的糾刪碼容錯技術(shù)研究[J]. 王意潔,許方亮,裴曉強.  計算機學報. 2017(01)
[7]利用四叉樹編碼的快速二值圖像邏輯運算方法[J]. 郭斯羽,周衛(wèi)方,溫和,梁夢霞.  電子測量與儀器學報. 2016(06)
[8]大數(shù)據(jù)環(huán)境下的管理信息系統(tǒng)發(fā)展研究[J]. 楊麗彬,李海林,張飛波.  大數(shù)據(jù). 2016(01)
[9]基于NoSQL的高分高光譜遙感影像存儲模型設計與實現(xiàn)[J]. 王曉蕊,楊強根,陳鳳敏,馬維峰,唐湘丹,譚興,張時忠.  地球科學(中國地質(zhì)大學學報). 2015(08)
[10]基于MPI的大規(guī)模遙感影像金字塔并行構(gòu)建方法[J]. 赫高進,熊偉,陳犖,吳秋云,景寧.  地球信息科學學報. 2015(05)

博士論文
[1]雙態(tài)云支持下高分辨率遙感存儲與計算一體化研究[D]. 李榮亞.浙江大學 2014
[2]分布式存儲系統(tǒng)中基于糾刪碼的容錯技術(shù)研究[D]. 朱云鋒.中國科學技術(shù)大學 2014

碩士論文
[1]海量遙感影像快速瀏覽技術(shù)研究與實現(xiàn)[D]. 運曉東.中國科學院大學(工程管理與信息技術(shù)學院) 2016
[2]基于Arc SDE和SQL Server空間數(shù)據(jù)庫的設計與優(yōu)化方法研究[D]. 馬元龍.安徽農(nóng)業(yè)大學 2016
[3]基于HDFS的影像數(shù)據(jù)金字塔構(gòu)建及存儲技術(shù)研究[D]. 林峰.東北林業(yè)大學 2016
[4]基于HDFS的分布式存儲系統(tǒng)的研究與實現(xiàn)[D]. 崔園.電子科技大學 2016
[5]基于HBase的彈性可視化遙感影像存儲系統(tǒng)[D]. 張曉兵.浙江大學 2016
[6]視頻編碼與糾刪碼協(xié)同編碼框架的研究[D]. 胡潔珺.吉林大學 2015
[7]高分辨率遙感影像共享關(guān)鍵技術(shù)研究與實現(xiàn)[D]. 高斌.電子科技大學 2014
[8]基于HDFS的分布式海量遙感影像數(shù)據(jù)存儲技術(shù)研究[D]. 陳時遠.中國科學院大學(工程管理與信息技術(shù)學院) 2013
[9]幾何校正中重采樣方法研究[D]. 陳燦.電子科技大學 2012
[10]基于HDFS的海量分布式文件系統(tǒng)的研究與優(yōu)化[D]. 付東華.北京郵電大學 2012



本文編號：2970628