一種面向CASA的分布式數(shù)據(jù)存儲策略
發(fā)布時間:2017-06-28 14:24
本文關(guān)鍵詞:一種面向CASA的分布式數(shù)據(jù)存儲策略,由筆耕文化傳播整理發(fā)布。
【摘要】:隨著天文設(shè)備的進(jìn)步發(fā)展,對海量天文數(shù)據(jù)處理形成了新的挑戰(zhàn)。為使當(dāng)前主流的天文數(shù)據(jù)分析軟件可以有效處理海量數(shù)據(jù),提出一種適用于射電天文處理上層應(yīng)用的分布式數(shù)據(jù)存儲策略DDSS(Distributed Data Storage Strategy)。首先,設(shè)計分布式數(shù)據(jù)存儲策略的系統(tǒng)框架。其次,設(shè)計混合分片列式存儲方法,在保留列存儲查詢優(yōu)勢的同時提升了數(shù)據(jù)導(dǎo)入的速度。進(jìn)一步,通過維護(hù)基于相對位置映射的元數(shù)據(jù)來快速讀取包含大量數(shù)據(jù)的天文陣列數(shù)據(jù),顯著地提升了天文處理應(yīng)用底層數(shù)據(jù)讀寫的吞吐量。最后,通過實(shí)驗證明了該方法的有效性。
【作者單位】: 東華大學(xué)計算機(jī)科學(xué)與技術(shù)學(xué)院;
【關(guān)鍵詞】: 分布式 天文 陣列數(shù)據(jù)
【分類號】:TP311.13
【正文快照】: 0引言 伴隨著信息爆炸,大數(shù)據(jù)時代已經(jīng)走入各行各業(yè),在諸如天文學(xué)、物理學(xué)、社會科學(xué)等行業(yè)中正源源不斷的產(chǎn)生真正的海量大數(shù)據(jù)。然而,這些行業(yè)在解決大數(shù)據(jù)所帶來數(shù)據(jù)讀寫與處理緩慢問題的方法卻滯后于其數(shù)據(jù)產(chǎn)生的速度。在射電天文領(lǐng)域,隨著射電望遠(yuǎn)鏡設(shè)備的飛躍發(fā)展,望遠(yuǎn)
【相似文獻(xiàn)】
中國期刊全文數(shù)據(jù)庫 前3條
1 ;CASA 2011征文通知[J];軟件;2010年12期
2 湯潔,鄭玲;計算機(jī)輔助精子分析(CASA)中的質(zhì)量管理[J];中國優(yōu)生與遺傳雜志;2002年06期
3 ;[J];;年期
中國碩士學(xué)位論文全文數(shù)據(jù)庫 前2條
1 馮智盈;基于CASA模型的NPP估算系統(tǒng)的開發(fā)與研究[D];吉林大學(xué);2011年
2 耿君;基于CASA模型瓦屋山林場森林NPP估測與查詢系統(tǒng)開發(fā)[D];南京林業(yè)大學(xué);2012年
本文關(guān)鍵詞:一種面向CASA的分布式數(shù)據(jù)存儲策略,由筆耕文化傳播整理發(fā)布。
,本文編號:494213
本文鏈接:http://sikaile.net/kejilunwen/ruanjiangongchenglunwen/494213.html
最近更新
教材專著