本文選題：科學(xué)衛(wèi)星 + 大數(shù)據(jù)技術(shù)��； 參考：《中國科學(xué)院研究生院(空間科學(xué)與應(yīng)用研究中心)》2015年碩士論文

【摘要】：隨著我國空間探索任務(wù)和科學(xué)衛(wèi)星事業(yè)的蓬勃發(fā)展,空間科學(xué)已從低空探測發(fā)展到深空探測,科學(xué)探測范圍逐步擴(kuò)大,探測器也日漸增多,衛(wèi)星探測任務(wù)更加頻繁,這些因素引發(fā)了數(shù)據(jù)規(guī)模的迅猛增長趨勢�？茖W(xué)衛(wèi)星從立項(xiàng)到在軌運(yùn)行,產(chǎn)生的數(shù)據(jù)種類非常多,數(shù)據(jù)量龐大,存儲(chǔ)特別分散,很難通過傳統(tǒng)方式,將其綜合起來,應(yīng)用到衛(wèi)星的在軌運(yùn)行管理中。在衛(wèi)星運(yùn)控?cái)?shù)據(jù)管理領(lǐng)域,傳統(tǒng)面向關(guān)系數(shù)據(jù)庫管理系統(tǒng)的方法正面臨著海量結(jié)構(gòu)化、半結(jié)構(gòu)化甚至非結(jié)構(gòu)化數(shù)據(jù)集存儲(chǔ)管理瓶頸,高并發(fā)訪問與高擴(kuò)展性的挑戰(zhàn),需要采用新方法對(duì)其實(shí)施有效管理,更好地服務(wù)于衛(wèi)星運(yùn)控管理應(yīng)用和其他應(yīng)用。借鑒發(fā)展日益成熟當(dāng)前大數(shù)據(jù)技術(shù),將大數(shù)據(jù)技術(shù)引入到科學(xué)衛(wèi)星運(yùn)控系統(tǒng)中。探索性地將大數(shù)據(jù)存儲(chǔ)管理方法應(yīng)用到圍繞科學(xué)衛(wèi)星產(chǎn)生的數(shù)據(jù)中,將衛(wèi)星運(yùn)控?cái)?shù)據(jù)存入No SQL非關(guān)系數(shù)據(jù)庫中,服務(wù)于衛(wèi)星的在軌運(yùn)行管理,發(fā)揮其模式靈活、快速存取、容錯(cuò)容災(zāi)、高并發(fā)訪問、橫向可擴(kuò)展伸縮等特性。將大數(shù)據(jù)存儲(chǔ)與處理框架Hadoop探索性地應(yīng)用到科學(xué)衛(wèi)星運(yùn)控系統(tǒng),集中統(tǒng)一管理衛(wèi)星生命周期中產(chǎn)生的海量非結(jié)構(gòu)化數(shù)據(jù),在有效控制系統(tǒng)維護(hù)成本的前提下,使系統(tǒng)獲得海量存儲(chǔ)能力、并行分布式處理能力、可擴(kuò)展與可伸縮能力。論文的主要內(nèi)容包括:1、分析衛(wèi)星運(yùn)控?cái)?shù)據(jù)的特點(diǎn),介紹衛(wèi)星運(yùn)控的相關(guān)知識(shí)背景。2、分析大數(shù)據(jù)技術(shù)的特點(diǎn)及對(duì)衛(wèi)星運(yùn)控?cái)?shù)據(jù)管理的適用性。介紹分布式存儲(chǔ)處理框架Hadoop以及No SQL數(shù)據(jù)庫理論技術(shù),分析探討No SQL與傳統(tǒng)關(guān)系型模型之間的差異,得出分布式處理框架和No SQL更適用于海量運(yùn)控?cái)?shù)據(jù)管理需求的結(jié)論。3、根據(jù)運(yùn)控?cái)?shù)據(jù)的特點(diǎn),設(shè)計(jì)選擇合適的大數(shù)據(jù)平臺(tái)工具;4、基于hadoop分布式處理平臺(tái),將海量結(jié)構(gòu)化半結(jié)構(gòu)化衛(wèi)星工程數(shù)據(jù)存儲(chǔ)到HBase的數(shù)據(jù)模型設(shè)計(jì)及優(yōu)化存儲(chǔ)方案,以及將海量非結(jié)構(gòu)化衛(wèi)星生命周期數(shù)據(jù)以文件方式存儲(chǔ)在HDFS分布式文件系統(tǒng)上,相應(yīng)的元數(shù)據(jù)信息存儲(chǔ)到HBase以獲得快速查詢響應(yīng)特性和可擴(kuò)展特性。5、通過部署配置及優(yōu)化hadoop系統(tǒng)以及hbase存儲(chǔ)實(shí)驗(yàn)驗(yàn)證大數(shù)據(jù)技術(shù)在衛(wèi)星運(yùn)控領(lǐng)域的可行性。本文使用大數(shù)據(jù)技術(shù)對(duì)衛(wèi)星運(yùn)控?cái)?shù)據(jù)存儲(chǔ),具有一定的技術(shù)創(chuàng)新和實(shí)際應(yīng)用價(jià)值的探索。
[Abstract]:With the vigorous development of space exploration missions and scientific satellites in China, space science has developed from low altitude exploration to deep space exploration. The scope of scientific exploration has gradually expanded, and the number of detectors has increased, and satellite exploration missions have become more frequent. These factors triggered a rapid increase in the size of the data. From project establishment to on-orbit operation, scientific satellites produce a large number of data types, large amount of data, especially scattered storage. It is difficult to integrate them through traditional methods and to apply them to the on-orbit operation management of satellites. In the field of satellite operation control data management, the traditional methods for relational database management system are facing the challenges of massive structured, semi-structured and even unstructured data set storage management bottleneck, high concurrent access and high scalability. It is necessary to adopt new methods to implement effective management to better serve for satellite operation management applications and other applications. Based on the development of big data technology, the big data technology is introduced into the scientific satellite operation control system. The big data storage management method is applied to the data generated around the scientific satellite, and the satellite operation control data is stored in the No SQL non-relational database, which serves the on-orbit operation management of the satellite, and gives full play to its flexible and fast access mode. Fault tolerant disaster tolerance, high concurrent access, lateral scalability and other features. The big data storage and processing framework, Hadoop, is applied to the scientific satellite operation control system for centralized and unified management of massive unstructured data generated in the satellite life cycle. Under the premise of effectively controlling the maintenance cost of the system, the big data storage and processing framework is applied to the scientific satellite operation control system. The system can achieve mass storage, parallel distributed processing, scalability and scalability. The main contents of this paper include: 1, analyzing the characteristics of satellite operation control data, introducing the knowledge background of satellite operation control, analyzing the characteristics of big data technology and its applicability to satellite operation control data management. This paper introduces the theory and technology of distributed storage and processing framework Hadoop and No SQL database, and discusses the difference between No SQL and traditional relational model. It is concluded that the distributed processing framework and No SQL are more suitable for mass operation control data management. According to the characteristics of the operation control data, a suitable big data platform tool is designed and selected, which is based on the hadoop distributed processing platform. The massive structured semi-structured satellite engineering data is stored in HBase data model design and optimized storage scheme, and the massive unstructured satellite life cycle data is stored in HDFS distributed file system in the form of files. The corresponding metadata information is stored in HBASE to obtain fast query response and extensibility. The feasibility of big data technology in satellite operation control field is verified by deploying configuration optimizing hadoop system and hbase storage experiment. This paper uses big data technology to store satellite operation control data, which has some technical innovation and practical application value.
【學(xué)位授予單位】：中國科學(xué)院研究生院(空間科學(xué)與應(yīng)用研究中心)
【學(xué)位級(jí)別】：碩士
【學(xué)位授予年份】：2015
【分類號(hào)】：V556;TP311.13

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 代明睿;朱克非;鄭平標(biāo);;我國鐵路應(yīng)用大數(shù)據(jù)技術(shù)的思考[J];鐵道運(yùn)輸與經(jīng)濟(jì);2014年03期

2 黃德輝;;大數(shù)據(jù)技術(shù)在電力企業(yè)的應(yīng)用[J];中國新技術(shù)新產(chǎn)品;2014年07期

3 李振元;李寶聚;王澤一;;大數(shù)據(jù)技術(shù)對(duì)我國電網(wǎng)未來發(fā)展的影響研究[J];吉林電力;2014年01期

4 ;CE人語[J];消費(fèi)電子;2013年09期

5 吳劍鋒,蔣壽偉,肖成永;延伸數(shù)據(jù)技術(shù)在AutoCAD明細(xì)表自動(dòng)生成中的應(yīng)用[J];機(jī)械設(shè)計(jì)與制造;2003年02期

6 程旭;趙云志;;大數(shù)據(jù):開啟面向未來的標(biāo)準(zhǔn)化事業(yè)[J];中國標(biāo)準(zhǔn)化;2014年05期

7 劉建英;鍵盤──辦公機(jī)器和數(shù)據(jù)技術(shù)、概念和分類[J];標(biāo)準(zhǔn)化報(bào)道;1995年05期

8 趙文濤;郭曉利;;元數(shù)據(jù)技術(shù)研究[J];艦船科學(xué)技術(shù);2011年S1期

9 黃俊杰;阮羚;馬黎莉;方賢才;;采用多維度數(shù)據(jù)技術(shù)對(duì)已掛網(wǎng)絕緣子的分析與故障診斷應(yīng)用研究[J];電瓷避雷器;2014年04期

10 ;[J];;年期

相關(guān)會(huì)議論文 前5條

1 ;北京京南航天數(shù)據(jù)技術(shù)有限公司[A];第十二屆全國實(shí)驗(yàn)力學(xué)學(xué)術(shù)會(huì)議論文摘要集[C];2009年

2 徐子偉;張陳斌;陳宗海;;大數(shù)據(jù)技術(shù)概述[A];系統(tǒng)仿真技術(shù)及其應(yīng)用學(xué)術(shù)論文集（第15卷）[C];2014年

3 賈麗;嚴(yán)f^雋;李聿淵;尹航;;大數(shù)據(jù)技術(shù)在指揮信息系統(tǒng)中的應(yīng)用研究[A];2014第二屆中國指揮控制大會(huì)論文集（下）[C];2014年

4 李忠;李?yuàn)檴?韓瑩;;地震監(jiān)測大數(shù)據(jù)技術(shù)研究框架[A];大數(shù)據(jù)、云計(jì)算與地球物理應(yīng)用研討活動(dòng)論文摘要集[C];2014年

5 李欣;任越;;數(shù)據(jù)技術(shù)在存量住房批量評(píng)稅中的運(yùn)用[A];中國房地產(chǎn)估價(jià)師與房地產(chǎn)經(jīng)紀(jì)人學(xué)會(huì)2011年年會(huì)論文集[C];2011年

相關(guān)重要報(bào)紙文章 前10條

1 記者 劉石磊;英國大數(shù)據(jù)技術(shù)應(yīng)用獲突破 瓶頸等問題尚待解決[N];經(jīng)濟(jì)參考報(bào);2013年

2 中國證券投資基金業(yè)協(xié)會(huì) 王葦航;英國投資“大數(shù)據(jù)”能帶來大收益嗎[N];中國財(cái)經(jīng)報(bào);2013年

3 姜念云;以大數(shù)據(jù)技術(shù)促文化資源管理[N];中國文化報(bào);2013年

4 本報(bào)記者 王娟;用大數(shù)據(jù)技術(shù)再造企業(yè)“外腦”[N];中國計(jì)算機(jī)報(bào);2013年

5 陶翔 羅天雨;大數(shù)據(jù)技術(shù)的發(fā)展歷程及其演化趨勢[N];科技日?qǐng)?bào);2014年

6 記者 張?zhí)m;運(yùn)用大數(shù)據(jù)技術(shù)推進(jìn)保險(xiǎn)業(yè)創(chuàng)新發(fā)展[N];金融時(shí)報(bào);2014年

7 記者 李利軍;巨細(xì)公司以紡織大數(shù)據(jù)技術(shù)打造共贏圈[N];中國紡織報(bào);2014年

8 李倩;數(shù)據(jù)技術(shù)讓保險(xiǎn)更精彩[N];金融時(shí)報(bào);2014年

9 北京大學(xué)教育學(xué)院副院長 教育技術(shù)系主任 尚俊杰;大數(shù)據(jù)技術(shù)下，如何報(bào)志愿？[N];光明日?qǐng)?bào);2014年

10 本報(bào)記者 陳鵬;改變生活，它真無所不能？[N];大連日?qǐng)?bào);2013年

相關(guān)碩士學(xué)位論文 前9條

1 段德珂;技術(shù)哲學(xué)視野下大數(shù)據(jù)技術(shù)研究[D];武漢理工大學(xué);2014年

2 陳敏偉;大數(shù)據(jù)技術(shù)在鐵路貨運(yùn)電子商務(wù)系統(tǒng)中的基本應(yīng)用研究[D];西南交通大學(xué);2015年

3 李虎;大數(shù)據(jù)技術(shù)在衛(wèi)星運(yùn)控中應(yīng)用探索[D];中國科學(xué)院研究生院(空間科學(xué)與應(yīng)用研究中心);2015年

4 王二朋;大數(shù)據(jù)技術(shù)和案例推理在城市建設(shè)審批中的研究與應(yīng)用[D];浙江大學(xué);2015年

5 李安增;基于大數(shù)據(jù)技術(shù)的環(huán)境質(zhì)量監(jiān)測系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];中國科學(xué)院研究生院（沈陽計(jì)算技術(shù)研究所）;2015年

6 婁秀明;用關(guān)聯(lián)數(shù)據(jù)技術(shù)實(shí)現(xiàn)網(wǎng)絡(luò)知識(shí)組織系統(tǒng)的研究[D];華東師范大學(xué);2010年

7 張愛蓮;基于Web的選煤數(shù)據(jù)技術(shù)處理系統(tǒng)的研究與實(shí)現(xiàn)[D];安徽理工大學(xué);2008年

8 王升;城市房屋拆遷管理GIS系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)[D];電子科技大學(xué);2012年

9 韓浩;大數(shù)據(jù)技術(shù)在商業(yè)銀行中的運(yùn)用探討[D];蘇州大學(xué);2014年

，

本文編號(hào)：2080959