氣象數(shù)據(jù)云數(shù)據(jù)存儲技術(shù)及應(yīng)用
本文選題:云數(shù)據(jù)存儲 切入點:氣象數(shù)據(jù) 出處:《氣象科技》2017年06期
【摘要】:針對氣象數(shù)據(jù)種類多、信息量大、精度高等特點,傳統(tǒng)的關(guān)系型數(shù)據(jù)庫系統(tǒng)在存儲處理、數(shù)據(jù)讀取等方面存在負載飽和、讀寫性能不理想等問題,利用云數(shù)據(jù)存儲技術(shù),結(jié)合氣象數(shù)據(jù)特征,設(shè)計了基于云數(shù)據(jù)存儲平臺的氣象數(shù)據(jù)存儲和處理方法。通過分析氣象數(shù)據(jù)的結(jié)構(gòu)化、半/非結(jié)構(gòu)化特征,采用云關(guān)系型數(shù)據(jù)庫存儲結(jié)構(gòu)氣象數(shù)據(jù);采用NoSQL對象庫存儲半/非結(jié)構(gòu)化氣象數(shù)據(jù);在數(shù)據(jù)的存儲過程中,應(yīng)用了氣象數(shù)據(jù)分塊壓縮技術(shù),進行氣象數(shù)據(jù)存儲和傳輸。結(jié)果表明,所討論的方法具有很好的存儲傳輸效率,能夠滿足大規(guī)模氣象數(shù)據(jù)在業(yè)務(wù)應(yīng)用中對存儲查詢和處理速度的要求。
[Abstract]:In view of the characteristics of many kinds of meteorological data, large amount of information and high precision, the traditional relational database system has many problems, such as load saturation in storage and processing, data reading and writing, etc., so the cloud data storage technology is used. The method of meteorological data storage and processing based on cloud data storage platform is designed based on the characteristics of meteorological data. By analyzing the structured, semi-structured and unstructured features of meteorological data, the cloud relational database is used to store meteorological data with structured structure. NoSQL object library is used to store half / unstructured meteorological data. In the process of data storage, meteorological data block compression technique is used to store and transmit meteorological data. The proposed method has good storage and transmission efficiency and can meet the requirements of storage query and processing speed in large-scale meteorological data applications.
【作者單位】: 浙江省氣象信息網(wǎng)絡(luò)中心;
【基金】:廣東省自然科學基金(2015A030310293) 浙江省氣象局重點項目(2016ZD15,2015ZD06)資助
【分類號】:P409
【相似文獻】
相關(guān)期刊論文 前10條
1 李雷孝;;氣象數(shù)據(jù)深度挖掘優(yōu)化方法研究與仿真[J];計算機仿真;2013年12期
2 李建;馬琰鋼;;浙江省“智慧高速”氣象數(shù)據(jù)交互網(wǎng)絡(luò)設(shè)計與實現(xiàn)[J];浙江氣象;2013年03期
3 王元;王錄中;;信息化氣象數(shù)據(jù)存檔后備和服務(wù)后援磁性載體配置的優(yōu)化設(shè)計[J];氣象科技;1991年06期
4 李樹忠,王春芳,張振;自動氣象數(shù)據(jù)采集站組態(tài)軟件設(shè)計[J];青島大學學報(工程技術(shù)版);1998年02期
5 F.Cerquetti;章育仲;;氣象數(shù)據(jù)的采集、檢驗及管理[J];氣象科技;1989年06期
6 黃業(yè)斐;嚴玲;;氣象數(shù)據(jù)應(yīng)急傳輸解決方法初探[J];氣象研究與應(yīng)用;2009年S1期
7 王甫棣;鄭波;胡英楣;;國務(wù)院氣象數(shù)據(jù)服務(wù)系統(tǒng)的升級改造[J];氣象科技;2012年05期
8 普布卓瑪;達娃多吉;;淺談西藏農(nóng)經(jīng)網(wǎng)氣象數(shù)據(jù)維護的經(jīng)驗及建議[J];電子制作;2013年19期
9 武茹芳,劉效文,郭五娃;微機在氣象數(shù)據(jù)處理中的應(yīng)用[J];山西氣象;1995年03期
10 華韻子;邵玲玲;林紅;;長江三角洲氣象數(shù)據(jù)實時共享技術(shù)研究與實現(xiàn)[J];氣象科技;2014年02期
相關(guān)會議論文 前10條
1 黃濤;鄭曉棟;;氣象數(shù)據(jù)中心設(shè)計與應(yīng)用[A];第31屆中國氣象學會年會S13 氣象通信與信息技術(shù)應(yīng)用實踐與新技術(shù)探索[C];2014年
2 黃業(yè)斐;嚴玲;;氣象數(shù)據(jù)應(yīng)急傳輸解決方法初探[A];2008年廣西氣象學會學術(shù)年會論文集[C];2008年
3 楊柳;林才;林海燕;劉加平;;我國典型氣象年的生成方法及其原始氣象數(shù)據(jù)質(zhì)量處理分析[A];全國建筑節(jié)能技術(shù)與設(shè)計學術(shù)會議論文集[C];2005年
4 王新堂;張國平;李蕓;曲軍;;山東省氣象數(shù)據(jù)資源收集工作探討[A];山東氣象學會2005年學術(shù)交流會優(yōu)秀論文集[C];2005年
5 高亢;秦巖松;紀俊云;;CMACast氣象數(shù)據(jù)文件收發(fā)效果分析[A];2011年中國氣象學會氣象通信與信息技術(shù)委員會暨國家氣象信息中心科技年會論文摘要[C];2011年
6 王甫棣;姚燕;李湘;;基于XML的氣象數(shù)據(jù)訂閱系統(tǒng)設(shè)計[A];2011年中國氣象學會氣象通信與信息技術(shù)委員會暨國家氣象信息中心科技年會論文摘要[C];2011年
7 韓海濤;李仲龍;;地面實時氣象數(shù)據(jù)質(zhì)量控制方法研究進展[A];第31屆中國氣象學會年會S13 氣象通信與信息技術(shù)應(yīng)用實踐與新技術(shù)探索[C];2014年
8 林奕峰;滕少華;陳瀟;林蟒;成明;;基于KNN的多組合器協(xié)同挖掘區(qū)域自動站氣象數(shù)據(jù)[A];第31屆中國氣象學會年會S13 氣象通信與信息技術(shù)應(yīng)用實踐與新技術(shù)探索[C];2014年
9 沈昭華;譚洪衛(wèi);呂思強;永村一雄;;上海地區(qū)建筑能耗計算用典型年氣象數(shù)據(jù)的研究[A];上海市制冷學會2009年學術(shù)年會論文集[C];2009年
10 于萬榮;;應(yīng)用Web Service方式進行氣象服務(wù)模式探討[A];創(chuàng)新驅(qū)動發(fā)展 提高氣象災(zāi)害防御能力——S3第三屆氣象服務(wù)發(fā)展論壇——公眾、專業(yè)氣象預(yù)報服務(wù)技術(shù)與應(yīng)用[C];2013年
相關(guān)重要報紙文章 前7條
1 王長城;新一代氣象數(shù)據(jù)衛(wèi)星廣播系統(tǒng)落戶我州[N];甘孜日報(漢文);2011年
2 通訊員 王國復(fù) 高峰;氣象空間信息庫助力國家電子政務(wù)[N];中國氣象報;2012年
3 記者 謝慶裕;加強氣象數(shù)據(jù)信息轉(zhuǎn)化應(yīng)用[N];南方日報;2013年
4 記者 尕瑪多吉 葉輝;我區(qū)年內(nèi)將實現(xiàn)高原氣象數(shù)據(jù)采集自動化[N];西藏日報;2004年
5 馬旭清 任桂林;搭建共享平臺 我省氣象信息實現(xiàn)整合[N];黑龍江經(jīng)濟報;2007年
6 Kim S.Nash;天氣中的大數(shù)據(jù)[N];計算機世界;2013年
7 記者 謝忠軍;收集南海氣象數(shù)據(jù)[N];中國氣象報;2012年
相關(guān)碩士學位論文 前9條
1 王劍輝;基于分支定界的不平衡氣象數(shù)據(jù)晴雨分析與預(yù)測[D];廣東工業(yè)大學;2016年
2 朱興宇;多組件融合的WRF模式氣象數(shù)據(jù)可視化平臺研究[D];南京信息工程大學;2016年
3 李婷;基于氣象數(shù)據(jù)的高高原簽派放行研究[D];中國民用航空飛行學院;2017年
4 陳文慧;大規(guī)模氣象數(shù)據(jù)布局的自適應(yīng)性研究[D];東北大學;2012年
5 趙方霞;基于氣象數(shù)據(jù)的數(shù)據(jù)挖掘算法研究[D];北方工業(yè)大學;2011年
6 李全月;氣象數(shù)據(jù)網(wǎng)絡(luò)化集成管理系統(tǒng)的設(shè)計[D];南京信息工程大學;2014年
7 白珍;氣象數(shù)據(jù)圖形顯示系統(tǒng)的設(shè)計與實現(xiàn)[D];電子科技大學;2015年
8 王倩倩;基于RS和GIS的農(nóng)區(qū)氣象數(shù)據(jù)重建方法研究[D];南京大學;2013年
9 薛莉;基于Google Earth的氣象數(shù)據(jù)可視化系統(tǒng)的設(shè)計[D];南京信息工程大學;2013年
,本文編號:1674854
本文鏈接:http://sikaile.net/kejilunwen/ruanjiangongchenglunwen/1674854.html