面向大型裝備狀態(tài)分析的分布式實時數(shù)據(jù)倉庫構建技術
本文選題:裝備行業(yè) + 狀態(tài)數(shù)據(jù)��; 參考:《計算機集成制造系統(tǒng)》2017年10期
【摘要】:面向大型裝備狀態(tài)分析的數(shù)據(jù)倉庫建設需求,在數(shù)據(jù)倉庫維度建模理論、分布式消息隊列、分布式流式計算的基礎上,提出一種快速構建分布式實時數(shù)據(jù)倉庫的方法。相比于傳統(tǒng)數(shù)據(jù)倉庫,提出了分布式實時數(shù)據(jù)倉庫在數(shù)據(jù)生命周期的改進方法。研究提出一種面向多數(shù)據(jù)場景的、可快速迭代的、具有高擴展性與數(shù)據(jù)可靠性的分布式實時數(shù)據(jù)倉庫構建方法。為支撐分布式實時數(shù)據(jù)倉庫的數(shù)據(jù)云平臺管理,總結了現(xiàn)有的三種集群自動化運維方法,并提出了對多種數(shù)據(jù)云平臺集成的方法。
[Abstract]:Based on the theory of dimension modeling of data warehouse, distributed message queue and distributed flow computing, a fast method of constructing distributed real-time data warehouse is proposed. Compared with traditional data warehouse, an improved method of distributed real time data warehouse in data lifecycle is proposed. In this paper, a method of constructing distributed real-time data warehouse with high scalability and data reliability is proposed, which is multi-data scene oriented and can be iterated quickly. In order to support the data cloud platform management of distributed real time data warehouse, three kinds of cluster automation operation and maintenance methods are summarized, and the methods of data cloud platform integration are put forward.
【作者單位】: 清華大學自動化系;
【基金】:國家863計劃資助項目(2015AA042102)~~
【分類號】:TP311.13
【相似文獻】
相關期刊論文 前10條
1 史金紅,吳永明;影響數(shù)據(jù)倉庫成功的關鍵因素[J];電子工程師;2000年01期
2 宋玉長,李本勇,郭小紅;如何構建銀行數(shù)據(jù)倉庫[J];上海微型計算機;2000年47期
3 賈納豫;數(shù)據(jù)倉庫的概念與機制[J];玉溪師范學院學報;2000年S1期
4 陳京民;數(shù)據(jù)倉庫開發(fā)的規(guī)劃研究[J];計算機與網(wǎng)絡;2000年09期
5 楊順生;數(shù)據(jù)倉庫鎖緊商業(yè)銀行(上)[J];中國計算機用戶;2000年04期
6 ;數(shù)據(jù)倉庫仔細看[J];每周電腦報;2000年10期
7 禾川;;數(shù)據(jù)倉庫起熱潮之應用篇[J];每周電腦報;2000年48期
8 楊順生;;中國商業(yè)銀行應實施數(shù)據(jù)倉庫[J];金融電子化;2000年03期
9 顧曉姝;;數(shù)據(jù)倉庫體系及其實現(xiàn)[J];運城高等�?茖W校學報;2000年S1期
10 袁磊,陳長清,馮玉才;數(shù)據(jù)倉庫的信息供應鏈模型[J];計算機工程與應用;2001年22期
相關會議論文 前10條
1 陳金雄;劉雄飛;王慶森;;醫(yī)院數(shù)據(jù)倉庫的設計與實現(xiàn)[A];首屆中國IT與醫(yī)藥衛(wèi)生高層論壇論文集[C];2004年
2 何朝紅;;數(shù)據(jù)倉庫在我國企業(yè)的應用現(xiàn)狀及實施策略分析[A];廣西計算機學會2006年年會論文集[C];2006年
3 郭遠遠;舒紅平;宮蕊;;基于數(shù)據(jù)倉庫的構建和馬爾可夫過程的應用研究[A];2008'中國信息技術與應用學術論壇論文集(二)[C];2008年
4 金周;;基于數(shù)據(jù)倉庫的能耗指標查詢體系[A];全國冶金自動化信息網(wǎng)2009年會論文集[C];2009年
5 李潔;李慶忠;王海洋;;一種有效的在線修改數(shù)據(jù)倉庫算法[A];第十六屆全國數(shù)據(jù)庫學術會議論文集[C];1999年
6 馮建華;蔣旭東;劉建民;周立柱;;面向市場分析與預測的數(shù)據(jù)倉庫平臺[A];第十六屆全國數(shù)據(jù)庫學術會議論文集[C];1999年
7 王曉玲;謝鴻強;劉安;董逸生;;數(shù)據(jù)倉庫建模工具的研制[A];第十七屆全國數(shù)據(jù)庫學術會議論文集(研究報告篇)[C];2000年
8 張德輝;李建中;;多維壓縮數(shù)據(jù)倉庫上的并行聚集算法[A];第十七屆全國數(shù)據(jù)庫學術會議論文集(研究報告篇)[C];2000年
9 潘海為;李建中;;數(shù)據(jù)倉庫的并行加載算法[A];第十七屆全國數(shù)據(jù)庫學術會議論文集(研究報告篇)[C];2000年
10 丁峰;鄧勇;沈鈞毅;;數(shù)據(jù)倉庫中進行數(shù)據(jù)維護的方法研究[A];第十七屆全國數(shù)據(jù)庫學術會議論文集(技術報告篇)[C];2000年
相關重要報紙文章 前10條
1 莊川 編譯;如何邁出實施數(shù)據(jù)倉庫的第一步[N];中國計算機報;2005年
2 萬振龍;動態(tài)數(shù)據(jù)倉庫承接歷史與未來[N];網(wǎng)絡世界;2009年
3 本報記者 潘永花;數(shù)據(jù)倉庫創(chuàng)新與眾不同[N];網(wǎng)絡世界;2010年
4 ;建立企業(yè)級數(shù)據(jù)倉庫實現(xiàn)銀行管理決策科學化[N];金融時報;2002年
5 本報記者 一泓;保險業(yè)數(shù)據(jù)倉庫應用的成功之路[N];金融時報;2003年
6 ;數(shù)據(jù)倉庫解決方案[N];中國計算機報;2002年
7 中國人民大學數(shù)據(jù)倉庫與商務智能工程研究中心 $$ 中國人民大學數(shù)據(jù)與知識工程研究所王珊、謝佳明、陳紅、劉中蔚、邵琦洪、張寧;創(chuàng)建數(shù)據(jù)倉庫:要面向三條路線[N];中國計算機報;2002年
8 IBM 軟件 Barry Devlin 博士;信息集成——數(shù)據(jù)倉庫架構的擴展[N];中國計算機報;2003年
9 段云峰 楊鳳年 宋俊德;數(shù)據(jù)倉庫必不可少[N];計算機世界;2002年
10 文武;數(shù)據(jù)倉庫助大鵬轉型[N];計算機世界;2003年
相關博士學位論文 前10條
1 宋旭東;企業(yè)集團數(shù)據(jù)倉庫系統(tǒng)關鍵技術研究[D];大連理工大學;2010年
2 陳燕;數(shù)據(jù)倉庫的設計與實現(xiàn)[D];大連理工大學;2000年
3 馮玉;數(shù)據(jù)倉庫環(huán)境中近似查詢處理技術研究[D];中國科學院研究生院(計算技術研究所);2002年
4 孫劍;海洋環(huán)境數(shù)據(jù)倉庫與數(shù)據(jù)挖掘應用研究[D];中國海洋大學;2011年
5 栗然;電力負荷分析與預測的分布式數(shù)據(jù)倉庫和數(shù)據(jù)挖掘研究[D];華北電力大學(河北);2009年
6 李學鋒;礦山企業(yè)數(shù)據(jù)倉庫的應用研究[D];昆明理工大學;2005年
7 馬軍杰;基于數(shù)據(jù)倉庫與聯(lián)機處理的區(qū)域經(jīng)濟發(fā)展管理決策支持系統(tǒng)研究[D];華東師范大學;2007年
8 陳金玉;數(shù)據(jù)倉庫實體化視圖聯(lián)機—致性維護研究[D];重慶大學;2002年
9 趙貴菊;勘探開發(fā)數(shù)據(jù)倉庫的模型研究和應用[D];中國地質大學(北京);2010年
10 朱傳華;三峽庫區(qū)地質災害數(shù)據(jù)倉庫與數(shù)據(jù)挖掘應用研究[D];中國地質大學;2010年
相關碩士學位論文 前10條
1 李佳航;基于數(shù)據(jù)倉庫的銀行中間業(yè)務系統(tǒng)研究[D];廈門大學;2008年
2 王R,
本文編號:1783917
本文鏈接:http://sikaile.net/kejilunwen/ruanjiangongchenglunwen/1783917.html