【摘要】：中國科學(xué)院啟動“未來先進核裂變能”戰(zhàn)略性先導(dǎo)科技專項來大力發(fā)展釷基熔鹽堆核能系統(tǒng)。該系統(tǒng)尚處于研究發(fā)展階段,運行產(chǎn)生的數(shù)據(jù)不可隨意丟棄,歷史數(shù)據(jù)歸檔系統(tǒng)用于過程變量的存儲、檢索和導(dǎo)出,是控制系統(tǒng)數(shù)據(jù)長期存儲及歷史數(shù)據(jù)趨勢線繪制的工具,有利于對核能系統(tǒng)的進一步深入研究與發(fā)展。由于存儲的變量隨著存儲時間不斷增長,數(shù)據(jù)的累積量按照關(guān)系型數(shù)據(jù)庫中所占字節(jié)計算已接近TB量級,目前采用的基于關(guān)系型數(shù)據(jù)庫的歸檔系統(tǒng)RDB Channel Archiver在這個量級上的查詢性能已達到瓶頸,需要一種能夠在上千級別的PV數(shù)量上展現(xiàn)性能的存儲系統(tǒng)。本論文結(jié)合控制系統(tǒng)的特點,對目前的歷史數(shù)據(jù)歸檔系統(tǒng)性能需求、功能業(yè)務(wù)需求等進行了分析,對國內(nèi)外大科學(xué)裝置中數(shù)據(jù)歸檔系統(tǒng)的發(fā)展進行了研究。本課題首先對影響關(guān)系型數(shù)據(jù)庫的性能的因素進行研究,通過觸發(fā)器建立根據(jù)時間進行分表的方法進行數(shù)據(jù)庫表優(yōu)化,經(jīng)優(yōu)化后的歸檔系統(tǒng)性能仍有待提高,因此對新一代基于非關(guān)系型數(shù)據(jù)庫的Archiver Appliance系統(tǒng)進行結(jié)構(gòu)及原理上的研究。Archiver Appliance在功能上相比原歸檔系統(tǒng)具有更加快速的檢索速度、豐富的系統(tǒng)狀態(tài)查看界面以及直觀的圖標查看功能等,完全可以滿足釷基熔鹽堆的數(shù)據(jù)歸檔需求。本文在對Archiver Appliance系統(tǒng)的結(jié)構(gòu)進行深入研究后分析出了提高其查詢速率的因素并進行測試驗證,同時針對系統(tǒng)的功能缺陷開發(fā)了實時監(jiān)控工具,并進行了頁面的并發(fā)性能測試、查詢性能測試等,該系統(tǒng)在返回數(shù)據(jù)量在10000以上的性能要明顯優(yōu)于RDB Channel Archiver,目前已在SF0實驗裝置中穩(wěn)定運行。
【學(xué)位授予單位】：中國科學(xué)院大學(xué)(中國科學(xué)院上海應(yīng)用物理研究所)
【學(xué)位級別】：碩士
【學(xué)位授予年份】：2019
【分類號】：TP311.13;TL426
【圖文】：

釷基熔鹽堆歷史數(shù)據(jù)歸檔系統(tǒng)的研究鹽堆尚無成熟的設(shè)計運行規(guī)范并存在大量需解決的技術(shù)難點，模擬運行數(shù)據(jù)對于研究分析而言具有重要的意義，在設(shè)備的預(yù)防性維護、預(yù)測性測性維修及預(yù)防性維修上可以提供可靠的數(shù)據(jù)支撐，對這些數(shù)據(jù)進行采檔管理的重要性不言而喻。因此，歷史數(shù)據(jù)歸檔系統(tǒng)應(yīng)是TMSR項目產(chǎn)中的重要組成部分，用于過程變量的存儲、檢索和導(dǎo)出，是控制系統(tǒng)數(shù)存儲及歷史數(shù)據(jù)趨勢線繪制的工具，有利于對TMSR核能系統(tǒng)的進一步究與發(fā)展。

EAST 又將 MDSplus（Model Drive System puls）數(shù)據(jù)庫引入系統(tǒng)DSplus 是專門為核聚變實驗開發(fā)的數(shù)據(jù)庫系統(tǒng)，它的存儲系統(tǒng)與關(guān)系型不同，數(shù)據(jù)為樹狀結(jié)構(gòu)分層管理，適合核聚變工程實驗的數(shù)據(jù)存儲。ST 數(shù)據(jù)系統(tǒng)中主要作用為將解壓后的數(shù)據(jù)進行格式轉(zhuǎn)換，便于統(tǒng)一管理也引入 MySQL 數(shù)據(jù)庫負責關(guān)系數(shù)據(jù)服務(wù)[7]。隨著時間的發(fā)展，EAST 裝的數(shù)據(jù)規(guī)模已達 PB 級別，為了數(shù)據(jù)更具可讀性，王月婷等人搭建了ySQL 數(shù)據(jù)庫與 Hive 大數(shù)據(jù)倉庫相結(jié)合的方式存儲 MDSplus 數(shù)據(jù)源，并ax、jQuery、EasyUI 等前端技術(shù)實現(xiàn) B/S 的數(shù)據(jù)檢索分析系統(tǒng)。系統(tǒng)結(jié)圖1.2所示：總控系統(tǒng)包含了多個采集單元對實驗信號進行監(jiān)聽，一旦有收便觸發(fā)存儲系統(tǒng)，將數(shù)據(jù)實時存儲到 MDSplus 數(shù)據(jù)庫中，同時將元數(shù)到 MySQL 并將其轉(zhuǎn)存入數(shù)據(jù)倉庫 Hive 中。該系統(tǒng)經(jīng)過測試顯示，檢索詢速度較之原系統(tǒng)提高了幾個量級，在大數(shù)據(jù)量的情況下優(yōu)勢明顯，數(shù)時原系統(tǒng)更占優(yōu)勢[8]。

【相似文獻】

相關(guān)期刊論文 前10條

1 姚蕊潔;;企業(yè)ERP系統(tǒng)數(shù)據(jù)歸檔分析與研究[J];數(shù)字技術(shù)與應(yīng)用;2018年06期

2 陳來;;海量數(shù)據(jù)歸檔與恢復(fù)系統(tǒng)技術(shù)研究與實現(xiàn)[J];計算機光盤軟件與應(yīng)用;2014年15期

3 趙力帥;李耕宇;武振宇;劉鵬;;基于分層異構(gòu)數(shù)據(jù)庫系統(tǒng)的歷史數(shù)據(jù)歸檔技術(shù)[J];電信科學(xué);2018年S1期

4 王艷紅;;淺析ERP數(shù)據(jù)歸檔應(yīng)注意的問題[J];蘭臺世界;2013年S4期

5 郭春雷;杜杰;孟巖;尚偉;;SAP系統(tǒng)數(shù)據(jù)歸檔的研究[J];科技信息;2009年04期

6 王宏學(xué);謝剛偉;;鋅層數(shù)據(jù)與鋼卷號相關(guān)聯(lián)的數(shù)據(jù)歸檔方法研究[J];梅山科技;2012年06期

7 成龍;樊榮;;淺談SAP系統(tǒng)數(shù)據(jù)歸檔[J];中國儲運;2015年08期

8 張莉;;對業(yè)務(wù)系統(tǒng)電子數(shù)據(jù)歸檔的探討[J];檔案天地;2014年S1期

9 王德峰;數(shù)據(jù)歸檔提升數(shù)據(jù)質(zhì)量[J];軟件世界;2004年12期

10 鄧翰;;使用反射工廠提高數(shù)據(jù)歸檔系統(tǒng)的靈活性[J];中國高新技術(shù)企業(yè);2008年10期

相關(guān)會議論文 前3條

1 仇道霞;馮少飛;張立鋒;;煙草企業(yè)數(shù)據(jù)歸檔的研究[A];中國煙草學(xué)會2015年度優(yōu)秀論文匯編[C];2015年

2 王娟;張波;王曉明;邱宏茂;朱國富;李健;許進;石建芳;;非連續(xù)地震數(shù)據(jù)存儲與歸檔[A];國家安全地球物理叢書（十）——地球物理環(huán)境與國家安全[C];2014年

3 楊俊;;企業(yè)大型信息系統(tǒng)數(shù)據(jù)歸檔技術(shù)[A];中國計量協(xié)會冶金分會2010年會論文集[C];2010年

相關(guān)重要報紙文章 前10條

1 郭平;數(shù)據(jù)歸檔軟件HT FileStore[N];計算機世界;2006年

2 佚名;三大步驟找到理想云數(shù)據(jù)歸檔服務(wù)[N];中國信息化周報;2015年

3 深圳市翔龍通訊有限公司上海分公司 胡雪菲;數(shù)據(jù)歸檔 有效利用存儲空間[N];中國計算機報;2006年

4 文婷;八大標準評估數(shù)據(jù)歸檔產(chǎn)品[N];中國計算機報;2008年

5 佟樂;審視數(shù)據(jù)歸檔效率[N];網(wǎng)絡(luò)世界;2008年

6 濟南鋼鐵自動化部 楊震;濟鋼用數(shù)據(jù)歸檔瘦身ERP系統(tǒng)[N];中國計算機報;2010年

7 記者 袁泉;我市將建立數(shù)字數(shù)據(jù)歸檔體系[N];太行日報;2015年

8 眾志和達(SOUL)公司產(chǎn)品經(jīng)理 王明水;數(shù)據(jù)歸檔:VTL與PTL共謀天下[N];中國計算機報;2009年

9 ;數(shù)據(jù)歸檔和災(zāi)備還得首選磁帶[N];中國計算機報;2003年

10 邊歆;數(shù)據(jù)歸檔三劍客[N];網(wǎng)絡(luò)世界;2009年

相關(guān)碩士學(xué)位論文 前10條

1 李嘉曾;釷基熔鹽堆歷史數(shù)據(jù)歸檔系統(tǒng)的研究[D];中國科學(xué)院大學(xué)(中國科學(xué)院上海應(yīng)用物理研究所);2019年

2 宋曉東;基于云計算的企業(yè)數(shù)據(jù)歸檔系統(tǒng)設(shè)計與實現(xiàn)[D];復(fù)旦大學(xué);2013年

3 李舒;心電系統(tǒng)數(shù)據(jù)歸檔的設(shè)計與實現(xiàn)[D];鄭州大學(xué);2016年

4 謝欣;商業(yè)銀行歷史數(shù)據(jù)歸檔的數(shù)據(jù)倉庫設(shè)計[D];華南理工大學(xué);2017年

5 范威威;離線光盤庫中盤匣管理技術(shù)的研究與實現(xiàn)[D];華中科技大學(xué);2014年

6 司巧梅;銀行數(shù)據(jù)歸檔管理平臺設(shè)計與實現(xiàn)[D];電子科技大學(xué);2014年

7 李育嶺;海量數(shù)據(jù)歸檔與恢復(fù)系統(tǒng)技術(shù)研究與實現(xiàn)[D];南京航空航天大學(xué);2013年

8 王艷群;面向糾刪碼存儲集群的離線歸檔優(yōu)化研究[D];華中科技大學(xué);2016年

9 彭晨;無磁盤緩存高速光盤刻錄機制的設(shè)計與實現(xiàn)[D];華中科技大學(xué);2015年

10 張巖;數(shù)據(jù)倉庫歷史數(shù)據(jù)歸檔與重構(gòu)的策略研究[D];東北大學(xué);2005年

本文編號：2718162