氣象資料自動化存儲系統(tǒng)的研究與實現(xiàn)
發(fā)布時間:2020-11-12 23:19
二十一世紀是中國氣象事業(yè)騰飛的世紀。中國氣象局要求各地氣象部門要切實做好服務當?shù)卣c社會生產工作。優(yōu)質的氣象服務需要全面、及時、精確的氣象資料作為基礎。陜西省目前氣象資料的存儲現(xiàn)狀是“多種數(shù)據(jù)庫系統(tǒng)并存,一種業(yè)務獨占一個數(shù)據(jù)庫”,缺少統(tǒng)一規(guī)劃和頂層設計,進一步開發(fā)與維護比較困難。資料管理與數(shù)據(jù)共享存在諸多不便。 本文研究國內外資料存儲技術的發(fā)展與應用現(xiàn)狀。分析了氣象行業(yè)資料的特點與業(yè)務要求,對各種氣象資料進行了詳細的歸納與整理。對目前陜西省氣象部門各種氣象資料進行規(guī)范化處理,設計并實現(xiàn)了統(tǒng)一集成的氣象資料庫、統(tǒng)一集中的數(shù)據(jù)存儲結構與質量控制方法,提出了氣象資料服務應用模型與接口規(guī)范。設計并建立了氣象資料自動化存儲系統(tǒng),實現(xiàn)了氣象資料自動存儲。最后對系統(tǒng)進行了詳細測試,確保了系統(tǒng)可用性與健壯性。 氣象資料自動化存儲系統(tǒng)建立了準確、全面的陜西省氣象資料庫,實現(xiàn)了氣象資料統(tǒng)一的、系統(tǒng)的自動化存儲及共享,大大增強了陜西省氣象部門資料存儲、共享的手段,有力地提升了氣象資料應用的水平。 本文目前只是完成了氣象資料的整理,資料庫的創(chuàng)建與自動化系統(tǒng)的建立。以后還需在元數(shù)據(jù)的管理、氣象資料的分析以及提高行業(yè)用戶服務質量等方面做進一步研究。
【學位單位】:西安電子科技大學
【學位級別】:碩士
【學位年份】:2009
【中圖分類】:TP333
【部分圖文】:
集與分發(fā)、數(shù)據(jù)加工處理、數(shù)據(jù)存儲管理、數(shù)據(jù)共享服務和業(yè)務監(jiān)控五個業(yè)務應用系統(tǒng)以及計算機、存儲、網(wǎng)絡與安全等平臺支持系統(tǒng),此外,還包括標準規(guī)范等技術保障部分,各部分的邏輯關系如圖2一1所示。獄獄拐共事加務移曉… …lll數(shù)拓姚一訪內掛彭” .!!!獷 獷甲罕:寧門 門!!!入庫管班!費側故!麟歸箱!狡旅徽合與處現(xiàn) !!!lll” 111獄獄據(jù)收粼與分發(fā)簇統(tǒng) ~~~已已置迪L石習公巡絲鯉紅習巡堂迪汪 汪圖2一1系統(tǒng)邏輯結構圖根據(jù)上述邏輯結構,系統(tǒng)劃分為:數(shù)據(jù)收集與分發(fā)系統(tǒng)、數(shù)據(jù)加工處理系統(tǒng)、數(shù)據(jù)存儲管理系統(tǒng)、數(shù)據(jù)共享服務系統(tǒng)和業(yè)務監(jiān)控系統(tǒng)五個業(yè)務系統(tǒng),以及計算機存儲和網(wǎng)絡安全等基礎平臺。
式氣象資料共享服務的應用,通過同城專網(wǎng)連接上述用戶;工 nternetDMZ區(qū)運行面向科研教育以及社會公眾,提供Web方式氣象資料共享服務的應用,連接工nternet網(wǎng)絡提供上述服務。系統(tǒng)網(wǎng)絡體系結構如圖圖2一2所示。圖2一2網(wǎng)絡拓樸結構示意圖2.7氣象資料信息流程氣象資料自動化存儲系統(tǒng)涉及數(shù)據(jù)收集分發(fā)、數(shù)據(jù)加工處理、數(shù)據(jù)存儲管理、數(shù)據(jù)共享服務和業(yè)務監(jiān)控等一系列過程。數(shù)據(jù)處理信息包括觀測資料和產品信息、元數(shù)據(jù)信息、業(yè)務監(jiān)控信息。氣象資料自動化存儲系統(tǒng)的信息來源于觀測系統(tǒng)上傳的各類觀測資料、國家級下發(fā)的資料和產品、各業(yè)務部門產生的業(yè)務產品、通過其它途徑(如Internet)獲得的資料和產品。通過收集系統(tǒng)獲得觀測資料和產品,在經過預處理后,分發(fā)或上傳給用戶單位,數(shù)據(jù)收發(fā)系統(tǒng)經過格式檢查后的數(shù)據(jù)經數(shù)據(jù)加工處理系統(tǒng)對數(shù)據(jù)進行處理后,由存儲管理系統(tǒng)將所有數(shù)據(jù)入庫管理,數(shù)據(jù)共享服務系統(tǒng)負責存儲管理系統(tǒng)管理的資料和產品的共享服務,通過分發(fā)、程序調用和Web檢索下載等方式為內外部用戶提供共享服務。所有信息處理的過程均產生監(jiān)控信息,由業(yè)務監(jiān)控系統(tǒng)對其進行統(tǒng)一管理、分析和展示。
載到數(shù)據(jù)庫系統(tǒng);向系統(tǒng)外的輸出數(shù)據(jù)(服務數(shù)據(jù))通過數(shù)據(jù)收發(fā)系統(tǒng)的分發(fā)功能和數(shù)據(jù)共享服務系統(tǒng)的數(shù)據(jù)共享服務功能實現(xiàn),其間系統(tǒng)完成的一系列信息處理過程的信息流程(見圖3一2)描述如下:數(shù)據(jù)收發(fā)系統(tǒng)收集到各類資料后,根據(jù)預處理流程的配置信息對資料進行文件編輯、文件名檢查、文件格式檢查、報告重復性檢查等處理,然后將這些資料全部推送到數(shù)據(jù)加工處理系統(tǒng)的臨時文件庫,并將需要歸檔的資料推送到數(shù)據(jù)存儲管理系統(tǒng)的歸檔目錄中。同時對國家局和行業(yè)用戶通過地面寬帶網(wǎng)和同城專用網(wǎng)進行分發(fā),在分發(fā)前還需對部分數(shù)據(jù)進行壓縮和打包處理。數(shù)據(jù)收發(fā)系統(tǒng)將根據(jù)通信傳輸業(yè)務要求,對該系統(tǒng)的全部信息處理過程和數(shù)據(jù)收發(fā)情況進行記錄,生成業(yè)務監(jiān)控信息,傳輸至業(yè)務監(jiān)控信息庫。數(shù)據(jù)加工處理系統(tǒng)從臨時文件庫中獲取數(shù)據(jù),其中部分資料需進行解碼;部分資料需在解碼后進行實時質量控制;部分資料不需解碼直接進行實時質量控制;部分資料不進行任何處理。這些資料將全部存入臨時文件庫
【參考文獻】
本文編號:2881369
【學位單位】:西安電子科技大學
【學位級別】:碩士
【學位年份】:2009
【中圖分類】:TP333
【部分圖文】:
集與分發(fā)、數(shù)據(jù)加工處理、數(shù)據(jù)存儲管理、數(shù)據(jù)共享服務和業(yè)務監(jiān)控五個業(yè)務應用系統(tǒng)以及計算機、存儲、網(wǎng)絡與安全等平臺支持系統(tǒng),此外,還包括標準規(guī)范等技術保障部分,各部分的邏輯關系如圖2一1所示。獄獄拐共事加務移曉… …lll數(shù)拓姚一訪內掛彭” .!!!獷 獷甲罕:寧門 門!!!入庫管班!費側故!麟歸箱!狡旅徽合與處現(xiàn) !!!lll” 111獄獄據(jù)收粼與分發(fā)簇統(tǒng) ~~~已已置迪L石習公巡絲鯉紅習巡堂迪汪 汪圖2一1系統(tǒng)邏輯結構圖根據(jù)上述邏輯結構,系統(tǒng)劃分為:數(shù)據(jù)收集與分發(fā)系統(tǒng)、數(shù)據(jù)加工處理系統(tǒng)、數(shù)據(jù)存儲管理系統(tǒng)、數(shù)據(jù)共享服務系統(tǒng)和業(yè)務監(jiān)控系統(tǒng)五個業(yè)務系統(tǒng),以及計算機存儲和網(wǎng)絡安全等基礎平臺。
式氣象資料共享服務的應用,通過同城專網(wǎng)連接上述用戶;工 nternetDMZ區(qū)運行面向科研教育以及社會公眾,提供Web方式氣象資料共享服務的應用,連接工nternet網(wǎng)絡提供上述服務。系統(tǒng)網(wǎng)絡體系結構如圖圖2一2所示。圖2一2網(wǎng)絡拓樸結構示意圖2.7氣象資料信息流程氣象資料自動化存儲系統(tǒng)涉及數(shù)據(jù)收集分發(fā)、數(shù)據(jù)加工處理、數(shù)據(jù)存儲管理、數(shù)據(jù)共享服務和業(yè)務監(jiān)控等一系列過程。數(shù)據(jù)處理信息包括觀測資料和產品信息、元數(shù)據(jù)信息、業(yè)務監(jiān)控信息。氣象資料自動化存儲系統(tǒng)的信息來源于觀測系統(tǒng)上傳的各類觀測資料、國家級下發(fā)的資料和產品、各業(yè)務部門產生的業(yè)務產品、通過其它途徑(如Internet)獲得的資料和產品。通過收集系統(tǒng)獲得觀測資料和產品,在經過預處理后,分發(fā)或上傳給用戶單位,數(shù)據(jù)收發(fā)系統(tǒng)經過格式檢查后的數(shù)據(jù)經數(shù)據(jù)加工處理系統(tǒng)對數(shù)據(jù)進行處理后,由存儲管理系統(tǒng)將所有數(shù)據(jù)入庫管理,數(shù)據(jù)共享服務系統(tǒng)負責存儲管理系統(tǒng)管理的資料和產品的共享服務,通過分發(fā)、程序調用和Web檢索下載等方式為內外部用戶提供共享服務。所有信息處理的過程均產生監(jiān)控信息,由業(yè)務監(jiān)控系統(tǒng)對其進行統(tǒng)一管理、分析和展示。
載到數(shù)據(jù)庫系統(tǒng);向系統(tǒng)外的輸出數(shù)據(jù)(服務數(shù)據(jù))通過數(shù)據(jù)收發(fā)系統(tǒng)的分發(fā)功能和數(shù)據(jù)共享服務系統(tǒng)的數(shù)據(jù)共享服務功能實現(xiàn),其間系統(tǒng)完成的一系列信息處理過程的信息流程(見圖3一2)描述如下:數(shù)據(jù)收發(fā)系統(tǒng)收集到各類資料后,根據(jù)預處理流程的配置信息對資料進行文件編輯、文件名檢查、文件格式檢查、報告重復性檢查等處理,然后將這些資料全部推送到數(shù)據(jù)加工處理系統(tǒng)的臨時文件庫,并將需要歸檔的資料推送到數(shù)據(jù)存儲管理系統(tǒng)的歸檔目錄中。同時對國家局和行業(yè)用戶通過地面寬帶網(wǎng)和同城專用網(wǎng)進行分發(fā),在分發(fā)前還需對部分數(shù)據(jù)進行壓縮和打包處理。數(shù)據(jù)收發(fā)系統(tǒng)將根據(jù)通信傳輸業(yè)務要求,對該系統(tǒng)的全部信息處理過程和數(shù)據(jù)收發(fā)情況進行記錄,生成業(yè)務監(jiān)控信息,傳輸至業(yè)務監(jiān)控信息庫。數(shù)據(jù)加工處理系統(tǒng)從臨時文件庫中獲取數(shù)據(jù),其中部分資料需進行解碼;部分資料需在解碼后進行實時質量控制;部分資料不需解碼直接進行實時質量控制;部分資料不進行任何處理。這些資料將全部存入臨時文件庫
【參考文獻】
相關期刊論文 前9條
1 胡文超;李曉蘋;韓海濤;;氣象元數(shù)據(jù)應用研究進展[J];干旱氣象;2008年04期
2 劉小寧,任芝花;地面氣象資料質量控制方法研究概述[J];氣象科技;2005年03期
3 高峰;趙芳;;元數(shù)據(jù)技術在MDSS實時氣象數(shù)據(jù)庫系統(tǒng)建設中的應用[J];氣象科技;2006年S1期
4 王海軍;楊志彪;楊代才;龔賢創(chuàng);;自動氣象站實時資料自動質量控制方法及其應用[J];氣象;2007年10期
5 王英;苑躍;王小蘭;;氣象資料的質量控制[J];四川氣象;2007年03期
6 張紅娟;陳高峰;田紅衛(wèi);;陜西省地面月氣候資料省級質量控制方法[J];陜西氣象;2009年03期
7 鄧莉,王國復,孫超,王新華,趙慧敏;基本氣象資料共享系統(tǒng)建設[J];應用氣象學報;2004年S1期
8 王國復,徐楓,吳增祥;氣象元數(shù)據(jù)標準與信息發(fā)布技術研究[J];應用氣象學報;2005年01期
9 劉小寧;鞠曉慧;范邵華;;空間回歸檢驗方法在氣象資料質量檢驗中的應用[J];應用氣象學報;2006年01期
本文編號:2881369
本文鏈接:http://sikaile.net/kejilunwen/jisuanjikexuelunwen/2881369.html
最近更新
教材專著