本文關(guān)鍵詞：大數(shù)據(jù)系統(tǒng)綜述，由筆耕文化傳播整理發(fā)布。

《中國科學(xué):信息科學(xué)》 2015年01期

投稿

大數(shù)據(jù)系統(tǒng)綜述

   

【摘要】：隨著科學(xué)、技術(shù)和工程的迅猛發(fā)展,近20年來,許多領(lǐng)域(如光學(xué)觀測、光學(xué)監(jiān)控、健康醫(yī)護(hù)、傳感器、用戶數(shù)據(jù)、互聯(lián)網(wǎng)和金融公司以及供應(yīng)鏈系統(tǒng))都產(chǎn)生了海量的數(shù)據(jù)(更恰當(dāng)?shù)拿枋龌蛟S是"無限"的數(shù)據(jù),例如,在光學(xué)觀測和監(jiān)控等應(yīng)用中,數(shù)據(jù)都是源源不斷而來的,形成了"數(shù)據(jù)災(zāi)難"),大數(shù)據(jù)的概念也隨之再次引起重視.與傳統(tǒng)的數(shù)據(jù)相比,除了大容量等表象特點(diǎn),大數(shù)據(jù)還具有其他獨(dú)特的特點(diǎn),例如大數(shù)據(jù)通常是無結(jié)構(gòu)的,并且需要得到實(shí)時(shí)分析,因此大數(shù)據(jù)的發(fā)展需要全新的體系架構(gòu),用于處理大規(guī)模數(shù)據(jù)的獲取、傳輸、存儲(chǔ)和分析.本文對大數(shù)據(jù)分析平臺(tái)進(jìn)行了盡可能詳盡的文獻(xiàn)調(diào)研,首先介紹了大數(shù)據(jù)的基本定義和大數(shù)據(jù)面臨的一些挑戰(zhàn);然后提出了大數(shù)據(jù)系統(tǒng)框架,將大數(shù)據(jù)系統(tǒng)分解為數(shù)據(jù)生成、數(shù)據(jù)獲取、數(shù)據(jù)存儲(chǔ)和數(shù)據(jù)分析等4個(gè)模塊,這4個(gè)模塊也構(gòu)成了大數(shù)據(jù)價(jià)值鏈;隨后討論了學(xué)術(shù)界和工業(yè)界中和大數(shù)據(jù)相關(guān)的方法和機(jī)制;最后介紹了典型的大數(shù)據(jù)系統(tǒng)基準(zhǔn)和大數(shù)據(jù)的一些科學(xué)問題.本文意圖為非專業(yè)讀者提供大數(shù)據(jù)的全景知識(shí),也為高級(jí)讀者定制自己的大數(shù)據(jù)解決方案提供輔助思想,希望能夠?qū)Υ髷?shù)據(jù)相關(guān)的科技和工程人員起到一些參考作用.

【作者單位】： 中國科學(xué)院西安光學(xué)精密機(jī)械研究所光學(xué)影像分析與學(xué)習(xí)中心
【關(guān)鍵詞】：
【基金】：
【分類號(hào)】：TP311.13
【正文快照】：

國家自然科學(xué)基金(批準(zhǔn)號(hào):61125106)資助項(xiàng)目1引言近年來,“大數(shù)據(jù)”已廣為人知,并被認(rèn)為是信息時(shí)代的新“石油”,這主要基于兩點(diǎn)共識(shí).首先,在過去20年間,數(shù)據(jù)產(chǎn)生速度越來越快.據(jù)國際數(shù)據(jù)公司IDC報(bào)道[1],2011年產(chǎn)生和復(fù)制的數(shù)據(jù)量超過1.8 Z字節(jié),是過去5年數(shù)據(jù)增長的9倍,并將

下載全文 更多同類文獻(xiàn)

PDF全文下載

CAJ全文下載

(如何獲取全文？ 歡迎：購買知網(wǎng)充值卡、在線充值、在線咨詢)

CAJViewer閱讀器支持CAJ、PDF文件格式，AdobeReader僅支持PDF格式

【參考文獻(xiàn)】

中國期刊全文數(shù)據(jù)庫 前2條

1 NGUYEN Quang Vinh;QIAN Yu;HUANG MaoLin;ZHANG JiaWan;;[J];Science China(Information Sciences);2013年05期

2 何清;莊福振;曾立;趙衛(wèi)中;譚慶;;[J];中國科學(xué):信息科學(xué);2014年07期

【共引文獻(xiàn)】

中國期刊全文數(shù)據(jù)庫 前6條

1 張孝;周寧南;;[J];科研信息化技術(shù)與應(yīng)用;2013年01期

2 陽振坤;楊傳輝;李震;;[J];科研信息化技術(shù)與應(yīng)用;2013年01期

3 任堃;李戰(zhàn)懷;;[J];華東師范大學(xué)學(xué)報(bào)(自然科學(xué)版);2014年05期

4 張濱;陳吉榮;樂嘉錦;;[J];計(jì)算機(jī)應(yīng)用與軟件;2014年11期

5 張正平;楊春;胡勤友;;[J];中國航海;2013年03期

6 Sayar Ahmet;Pierce Marlon;Fox C.Geoffrey;;[J];Journal of Central South University;2014年01期

中國博士學(xué)位論文全文數(shù)據(jù)庫 前3條

1 王金寶;[D];哈爾濱工業(yè)大學(xué);2013年

2 何敬;[D];西南交通大學(xué);2013年

3 帖軍;[D];華中科技大學(xué);2013年

中國碩士學(xué)位論文全文數(shù)據(jù)庫 前6條

1 陸鵬超;[D];哈爾濱工業(yè)大學(xué);2012年

2 趙揚(yáng)名;[D];武漢科技大學(xué);2013年

3 張光輝;[D];東華大學(xué);2014年

4 袁大星;[D];華中科技大學(xué);2013年

5 余基映;[D];華中科技大學(xué);2013年

6 王冬;[D];鄭州大學(xué);2014年

【二級(jí)參考文獻(xiàn)】

中國期刊全文數(shù)據(jù)庫 前1條

1 宋曉云;蘇宏升;;[J];現(xiàn)代電子技術(shù);2007年02期

【相似文獻(xiàn)】

中國期刊全文數(shù)據(jù)庫 前10條

1 鄧興升;[J];大壩與安全;2000年04期

2 ;[J];軟件世界;2009年11期

3 郝南軍;;[J];國外科學(xué)儀器;1986年02期

4 夏紅,劉燕;[J];環(huán)境監(jiān)測管理與技術(shù);1997年06期

5 路易斯·科爾蒂,項(xiàng)龍;[J];國際社會(huì)科學(xué)雜志(中文版);2004年03期

6 于曉輝;張卓勇;張孝芳;范國強(qiáng);張鵬;;[J];計(jì)算機(jī)與應(yīng)用化學(xué);2006年08期

7 郭嘉凱;;[J];軟件和信息服務(wù);2012年09期

8 汪明珠;解苑明;;[J];核電子學(xué)與探測技術(shù);2010年07期

9 付朋俠;;[J];科技創(chuàng)業(yè)家;2013年17期

10 楊英;[J];管理科學(xué)文摘;1997年11期

中國重要會(huì)議論文全文數(shù)據(jù)庫 前5條

1 李煒;陳勇;徐玉朋;張藝;崔葦葦;王于仨;王娟;韓大煒;陸波;楊彥佶;;[A];第二十四屆全國空間探測學(xué)術(shù)交流會(huì)論文摘要集[C];2011年

2 景韶光;陳定昌;蔣酂平;;[A];高科技產(chǎn)業(yè)的系統(tǒng)工程管理論文集[C];2003年

3 梁志偉;劉保延;何麗蕓;文天才;胡鏡清;謝雁鳴;程翼宇;;[A];首屆中國IT與醫(yī)藥衛(wèi)生高層論壇論文集[C];2004年

4 楊世興;楊宇鴻;;[A];2001年東北三省測繪學(xué)術(shù)與信息交流會(huì)論文集[C];2001年

5 鄧興升;;[A];中國水力發(fā)電工程學(xué)會(huì)大壩安全監(jiān)測專業(yè)委員會(huì)年會(huì)暨學(xué)術(shù)交流會(huì)論文集[C];2000年

中國重要報(bào)紙全文數(shù)據(jù)庫 前10條

1 本報(bào)記者 劉麗麗;[N];計(jì)算機(jī)世界;2009年

2 ;[N];人民郵電;2007年

3 李雪;[N];中國計(jì)算機(jī)報(bào);2008年

4 ;[N];計(jì)算機(jī)世界;2002年

5 賽迪智庫軟件與信息服務(wù)研究所;[N];中國電子報(bào);2012年

6 本報(bào)記者 霍娜;[N];中國計(jì)算機(jī)報(bào);2013年

7 本報(bào)記者　郭平;[N];計(jì)算機(jī)世界;2003年

8 電腦商報(bào)記者 劉一冰;[N];電腦商報(bào);2009年

9 ;[N];中國計(jì)算機(jī)報(bào);2010年

10 佟樂;[N];網(wǎng)絡(luò)世界;2007年

中國碩士學(xué)位論文全文數(shù)據(jù)庫 前10條

1 何宇;[D];南京航空航天大學(xué);2011年

2 田勝利;[D];國防科學(xué)技術(shù)大學(xué);2012年

3 陳倪娜;[D];南京航空航天大學(xué);2009年

4 蔡起超;[D];哈爾濱工業(yè)大學(xué);2013年

5 曾理寧;[D];湖南大學(xué);2011年

6 刁靜;[D];華中科技大學(xué);2012年

7 王海山;[D];湖北工業(yè)大學(xué);2011年

8 崔家堂;[D];電子科技大學(xué);2011年

9 王大力;[D];同濟(jì)大學(xué);2007年

10 王艷明;[D];吉林大學(xué);2007年

  本文關(guān)鍵詞：大數(shù)據(jù)系統(tǒng)綜述，由筆耕文化傳播整理發(fā)布。

，

本文編號(hào)：237367