發(fā)布時(shí)間：2017-09-24 01:21

  本文關(guān)鍵詞：數(shù)據(jù)湖——一種更好的大數(shù)據(jù)存儲(chǔ)架構(gòu)

  更多相關(guān)文章： 數(shù)據(jù)湖 數(shù)據(jù)池

【摘要】："數(shù)據(jù)湖"是通過(guò)將原始數(shù)據(jù)分類(lèi)存儲(chǔ)到不同數(shù)據(jù)池,并在各數(shù)據(jù)池里將數(shù)據(jù)整合轉(zhuǎn)化成容易分析的統(tǒng)一存儲(chǔ)格式進(jìn)行存儲(chǔ),以方便用戶(hù)對(duì)大量原始數(shù)據(jù)池中原本幾近廢棄的數(shù)據(jù)加以分析利用,從而產(chǎn)生經(jīng)濟(jì)效益。該文首先介紹了數(shù)據(jù)湖的結(jié)構(gòu),其次介紹了數(shù)據(jù)湖中各數(shù)據(jù)池的特點(diǎn)及應(yīng)用;最后介紹了各數(shù)據(jù)池之間的聯(lián)系并舉例說(shuō)明了數(shù)據(jù)湖的架構(gòu)。
【作者單位】： 西安石油大學(xué)計(jì)算機(jī)學(xué)院;
【關(guān)鍵詞】： 數(shù)據(jù)湖 數(shù)據(jù)池
【分類(lèi)號(hào)】：TP311.13;TP333
【正文快照】： 隨著計(jì)算機(jī)技術(shù)的迅速發(fā)展,數(shù)據(jù)量日益增多,因而大數(shù)據(jù)管理[3]也是大數(shù)據(jù)發(fā)展中的一大挑戰(zhàn)。數(shù)據(jù)池可存儲(chǔ)大量不同來(lái)源、格式各異的數(shù)據(jù)的存儲(chǔ)空間,而數(shù)據(jù)湖[1,2,5]則是包含多個(gè)數(shù)據(jù)池的存儲(chǔ)空間,而且每個(gè)數(shù)據(jù)池中的數(shù)據(jù)都是來(lái)源相同并在池內(nèi)進(jìn)行整合形成格式統(tǒng)一的數(shù)據(jù)。目前

【相似文獻(xiàn)】

中國(guó)期刊全文數(shù)據(jù)庫(kù) 前10條

1 鄧愛(ài)華;;大數(shù)據(jù)時(shí)代來(lái)臨 你準(zhǔn)備好了嗎?[J];科技潮;2012年09期

2 劉中宇;劉海良;;大數(shù)據(jù)時(shí)代高校云資源應(yīng)用[J];現(xiàn)代教育技術(shù);2013年07期

3 陶雪嬌;胡曉峰;劉洋;;大數(shù)據(jù)研究綜述[J];系統(tǒng)仿真學(xué)報(bào);2013年S1期

4 ;大數(shù)據(jù)[J];財(cái)務(wù)與會(huì)計(jì)(理財(cái)版);2013年07期

5 孫志偉;;大數(shù)據(jù)時(shí)代中小企業(yè)的應(yīng)對(duì)策略[J];未來(lái)與發(fā)展;2013年10期

6 宋慧欣;;大數(shù)據(jù)時(shí)代的自動(dòng)化機(jī)遇[J];自動(dòng)化博覽;2013年10期

7 ;大數(shù)據(jù)的崛起:趨勢(shì)、機(jī)遇與挑戰(zhàn)[J];互聯(lián)網(wǎng)周刊;2013年24期

8 鄧春宇;郭陽(yáng);李俊妮;王伯伊;;大數(shù)據(jù)在縣級(jí)供電公司中的應(yīng)用[J];農(nóng)村電氣化;2014年03期

9 謝然;;大數(shù)據(jù)引領(lǐng)智能交通 且行且珍惜[J];互聯(lián)網(wǎng)周刊;2014年08期

10 李曉輝;王淑艷;;大數(shù)據(jù)及其挑戰(zhàn)[J];科技風(fēng);2012年23期

中國(guó)重要會(huì)議論文全文數(shù)據(jù)庫(kù) 前4條

1 李田;郭利;馮鵬;;某型導(dǎo)彈單元設(shè)備自動(dòng)檢測(cè)系統(tǒng)軟件設(shè)計(jì)[A];全國(guó)第十五屆計(jì)算機(jī)科學(xué)與技術(shù)應(yīng)用學(xué)術(shù)會(huì)議論文集[C];2003年

2 高世光;鄧蘇;王長(zhǎng)纓;;關(guān)于ADO+引導(dǎo)數(shù)據(jù)種類(lèi)的演變的研究[A];第十八屆全國(guó)數(shù)據(jù)庫(kù)學(xué)術(shù)會(huì)議論文集（技術(shù)報(bào)告篇）[C];2001年

3 顏涯;邵佩英;;GIS與MIS系統(tǒng)集成技術(shù)在城市規(guī)劃中的應(yīng)用[A];第十七屆全國(guó)數(shù)據(jù)庫(kù)學(xué)術(shù)會(huì)議論文集（研究報(bào)告篇）[C];2000年

4 謝國(guó)忠;;大數(shù)據(jù)時(shí)代下的企業(yè)管理與創(chuàng)新[A];創(chuàng)新驅(qū)動(dòng)：新機(jī)遇 新挑戰(zhàn)——2013年全國(guó)企業(yè)管理創(chuàng)新大會(huì)資料匯編[C];2013年

中國(guó)重要報(bào)紙全文數(shù)據(jù)庫(kù) 前10條

1 中國(guó)科學(xué)技術(shù)發(fā)展戰(zhàn)略研究院 許曄;大數(shù)據(jù)時(shí)代來(lái)襲 中國(guó)宜加緊布局[N];經(jīng)濟(jì)參考報(bào);2013年

2 記者 李成成;嶄露頭角的大數(shù)據(jù)時(shí)代[N];企業(yè)家日?qǐng)?bào);2013年

3 ;精簡(jiǎn)企業(yè)數(shù)據(jù)是時(shí)候了[N];計(jì)算機(jī)世界;2008年

4 光大證券;“大數(shù)據(jù)”或成重要投資主線(xiàn)[N];中國(guó)證券報(bào);2012年

5 本報(bào)記者 郭濤 李奕;與大數(shù)據(jù)打交道的那些人[N];中國(guó)計(jì)算機(jī)報(bào);2012年

6 本報(bào)記者 齊潔;大數(shù)據(jù)蘊(yùn)藏創(chuàng)業(yè)空間[N];中國(guó)經(jīng)營(yíng)報(bào);2012年

7 吳勇毅;大數(shù)據(jù)“熱”下的“冷”思考[N];中國(guó)冶金報(bào);2012年

8 撫蘇;眾望所歸，大數(shù)據(jù)時(shí)代來(lái)臨[N];電腦報(bào);2013年

9 《網(wǎng)絡(luò)世界》記者 于翔;大數(shù)據(jù)的價(jià)值實(shí)現(xiàn)之旅[N];網(wǎng)絡(luò)世界;2013年

10 本報(bào)記者 孫琦子;這些年,一起忽悠著的“大數(shù)據(jù)”[N];經(jīng)濟(jì)觀察報(bào);2013年

中國(guó)博士學(xué)位論文全文數(shù)據(jù)庫(kù) 前5條

1 張?zhí)m廷;大數(shù)據(jù)的社會(huì)價(jià)值與戰(zhàn)略選擇[D];中共中央黨校;2014年

2 李琦;基于多源數(shù)據(jù)的交通狀態(tài)監(jiān)測(cè)與預(yù)測(cè)方法研究[D];吉林大學(xué);2013年

3 張新;區(qū)域性防災(zāi)減災(zāi)信息服務(wù)體系研究[D];中國(guó)科學(xué)院研究生院（遙感應(yīng)用研究所）;2006年

4 李智慧;基于可視化的三維放射治療計(jì)算機(jī)模擬系統(tǒng)的研究[D];四川大學(xué);2002年

5 袁培森;基于LSH的Web數(shù)據(jù)相似性查詢(xún)研究[D];復(fù)旦大學(xué);2011年

中國(guó)碩士學(xué)位論文全文數(shù)據(jù)庫(kù) 前10條

1 郭銘;大數(shù)據(jù)時(shí)代包頭公安基礎(chǔ)信息化建設(shè)研究[D];內(nèi)蒙古大學(xué);2015年

2 賈同;大數(shù)據(jù)對(duì)高等教育發(fā)展的推動(dòng)研究[D];西南大學(xué);2015年

3 張靖雯;基于GPS路網(wǎng)的重卡動(dòng)力參數(shù)分析系統(tǒng)開(kāi)發(fā)[D];長(zhǎng)安大學(xué);2015年

4 張輝;基于移動(dòng)互聯(lián)網(wǎng)的高速公路公眾信息服務(wù)系統(tǒng)分析與研究[D];長(zhǎng)安大學(xué);2015年

5 鄧先明;基于西安市礦產(chǎn)資源規(guī)劃關(guān)系數(shù)據(jù)庫(kù)的數(shù)據(jù)質(zhì)量控制研究[D];長(zhǎng)安大學(xué);2015年

6 魏亞紅;流式數(shù)據(jù)的并行分類(lèi)算法研究[D];曲阜師范大學(xué);2015年

7 黃成鵬;大數(shù)據(jù)時(shí)代的個(gè)人隱私[D];華中師范大學(xué);2015年

8 霍美娜;基于Hadoop海量數(shù)據(jù)分析的反腐云計(jì)算設(shè)計(jì)與實(shí)現(xiàn)[D];山東大學(xué);2015年

9 朱迪;云計(jì)算在電力系統(tǒng)中的應(yīng)用研究[D];華北電力大學(xué);2015年

10 程彬彬;基于Hadoop的氣溫?cái)?shù)據(jù)組織及時(shí)空分異特征提取方法研究[D];南京師范大學(xué);2015年

，

本文編號(hào)：908550