發(fā)布時間：2018-02-03 06:06

  本文關(guān)鍵詞： 云計算 圖形處理器 并行計算 Hadoop 海洋流場可視化 MapReduce　出處：《計算機(jī)應(yīng)用研究》2014年08期 　論文類型：期刊論文

【摘要】：針對原生的Hadoop云平臺處理海洋環(huán)境信息可視化效率不高的問題,提出了一種GPU嵌入Hadoop云平臺的并行計算框架。該框架以原生Hadoop為基礎(chǔ),GPU并行計算與MapReduce相結(jié)合,實現(xiàn)了高效的海洋流場可視化和特征可視化。實驗結(jié)果表明,提出的并行計算框架在處理數(shù)據(jù)密集型和計算密集型的海洋數(shù)據(jù)的效率上優(yōu)于原生的Hadoop云平臺,可達(dá)到6~8倍的加速比。因此,提出的云平臺框架可以有效提高海洋信息可視化的計算效率,對我國海洋事業(yè)的信息可視化發(fā)展具有重要的推動作用。
[Abstract]:According to the original Hadoop cloud platform of marine environment information visualization efficiency is not high, proposed a parallel GPU embedded Hadoop cloud computing platform framework. This framework is based on the original Hadoop, GPU parallel computing is combined with MapReduce, realized the visualization and visualization of ocean flow characteristics of high efficiency. Experimental results show that the proposed efficiency the parallel computing framework of marine data intensive computing in data intensive and the better than the original Hadoop cloud platform, the speedup can reach 6~8 times. Therefore, the computational efficiency of cloud platform framework proposed can effectively improve the ocean information visualization, information visualization plays an important role in promoting the development of China's marine industry.

【作者單位】： 中國海洋大學(xué)信息科學(xué)與工程學(xué)院;煙臺大學(xué)計算機(jī)學(xué)院;
【基金】：海洋公益性行業(yè)科研專項經(jīng)費(fèi)資助項目(201105033) 山東省自然科學(xué)基金資助項目(ZR2012FL07)
【分類號】：TP338.6
【正文快照】： 近年來,隨著海洋強(qiáng)國的提出,我國海洋事業(yè)進(jìn)入了高速發(fā)展期,海洋環(huán)境信息可視化[1]工作的重要性日益突出。海洋環(huán)境信息數(shù)據(jù)隨之飛速增長,加速海洋數(shù)據(jù)處理成為了必然趨勢。針對海洋信息可視化要求的插值精度逐步升高、處理速度進(jìn)一步加快,以及原生態(tài)的基于CPU的Hadoop[2]在處

【參考文獻(xiàn)】

相關(guān)期刊論文 前3條

1 王峰;雷葆華;;Hadoop分布式文件系統(tǒng)的模型分析[J];電信科學(xué);2010年12期

2 王加亮;秦勃;劉健健;劉妮;;基于MapReduce的交互可視化平臺[J];電信科學(xué);2012年09期

3 盧風(fēng)順;宋君強(qiáng);銀�？�;張理論;;CPU/GPU協(xié)同并行計算研究綜述[J];計算機(jī)科學(xué);2011年03期

【共引文獻(xiàn)】

相關(guān)期刊論文 前10條

1 王偉;;基于Hadoop的分布式索引集群的研究[J];電腦知識與技術(shù);2011年35期

2 王加亮;秦勃;劉健健;劉妮;;基于MapReduce的交互可視化平臺[J];電信科學(xué);2012年09期

3 楊芳菊;;基于CPU/GPU異構(gòu)平臺并行優(yōu)化的研究[J];電腦編程技巧與維護(hù);2012年18期

4 劉軍志;朱阿興;秦承志;陳臘嬌;吳輝;江凈超;;分布式水文模型的并行計算研究進(jìn)展[J];地理科學(xué)進(jìn)展;2013年04期

5 方留楊;王密;李德仁;;CPU和GPU協(xié)同處理的光學(xué)衛(wèi)星遙感影像正射校正方法[J];測繪學(xué)報;2013年05期

6 楊清山;劉X;熊飛;鐘立俊;邴丕浩;;基于GPU的并行區(qū)域場強(qiáng)計算[J];電子信息對抗技術(shù);2013年06期

7 辛晃;易興輝;陳震宇;;基于Hadoop+MPP架構(gòu)的電信運(yùn)營商網(wǎng)絡(luò)數(shù)據(jù)共享平臺研究[J];電信科學(xué);2014年04期

8 方留楊;王密;李德仁;潘俊;;負(fù)載分配的CPU/GPU高分辨率衛(wèi)星影像調(diào)制傳遞補(bǔ)償方法[J];測繪學(xué)報;2014年06期

9 洪亮;周松濤;羅伊;石婷婷;胡飛;;海量遙感數(shù)據(jù)的GPU通用加速計算技術(shù)[J];地理空間信息;2014年03期

10 邢星星;趙國興;駱祖瑩;方浩;;基于GPU的全源最短路徑算法[J];計算機(jī)科學(xué);2012年03期

相關(guān)會議論文 前2條

1 丁輝;張大華;羅志明;;基于Hadoop的海量數(shù)據(jù)處理平臺研究[A];2011電力通信管理暨智能電網(wǎng)通信技術(shù)論壇論文集[C];2011年

2 ;Research on DSP-GPU Heterogeneous Computing System[A];Information Technology and Computer Science—Proceedings of 2012 National Conference on Information Technology and Computer Science[C];2012年

相關(guān)博士學(xué)位論文 前2條

1 江涵;大規(guī)模電力系統(tǒng)暫態(tài)穩(wěn)定并行計算研究[D];浙江大學(xué);2012年

2 周勇;基于并行計算的數(shù)據(jù)流處理方法研究[D];大連理工大學(xué);2013年

相關(guān)碩士學(xué)位論文 前10條

1 楊博;深穿透粒子輸運(yùn)蒙特卡羅模擬的CPU/GPU協(xié)同算法研究[D];國防科學(xué)技術(shù)大學(xué);2011年

2 石志才;異構(gòu)平臺上協(xié)同計算的相關(guān)研究[D];國防科學(xué)技術(shù)大學(xué);2011年

3 王翔;球諧函數(shù)展開快速算法及其并行算法研究[D];國防科學(xué)技術(shù)大學(xué);2011年

4 呂東川;基于并行計算的腦電信號分析方法研究[D];燕山大學(xué);2012年

5 栗超;一種三維可視化系統(tǒng)的優(yōu)化策略[D];燕山大學(xué);2012年

6 刁興光;獨(dú)立成分算法在GPU上的實現(xiàn)[D];大連理工大學(xué);2012年

7 宋愛青;基于Hadoop的日志分析系統(tǒng)的設(shè)計與實現(xiàn)[D];中國地質(zhì)大學(xué)(北京);2012年

8 趙琳琳;非均勻地層隨鉆電磁波測井電磁響應(yīng)的研究[D];山東大學(xué);2012年

9 李國棟;基于異構(gòu)計算平臺的列數(shù)據(jù)庫并行查詢技術(shù)研究與實現(xiàn)[D];華南理工大學(xué);2012年

10 沈玉琳;通用GPU計算技術(shù)在高性能計算平臺上的應(yīng)用研究[D];蘭州大學(xué);2012年

【二級參考文獻(xiàn)】

相關(guān)期刊論文 前4條

1 ;Multi-scale HPC system for multi-scale discrete simulation—Development and application of a supercomputer with 1 Petaflops peak performance in single precision[J];Particuology;2009年04期

2 盧風(fēng)順;宋君強(qiáng);銀福康;張理論;;CPU/GPU協(xié)同并行計算研究綜述[J];計算機(jī)科學(xué);2011年03期

3 吳恩華;圖形處理器用于通用計算的技術(shù)、現(xiàn)狀及其挑戰(zhàn)[J];軟件學(xué)報;2004年10期

4 曾誠;李兵;何克清;;云計算的棧模型研究[J];微電子學(xué)與計算機(jī);2009年08期

相關(guān)碩士學(xué)位論文 前2條

1 吳強(qiáng);GPU加速高速粒子碰撞模擬[D];國防科學(xué)技術(shù)大學(xué);2009年

2 方旭東;面向大規(guī)模科學(xué)計算的CPU-GPU異構(gòu)并行技術(shù)研究[D];國防科學(xué)技術(shù)大學(xué);2009年

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 孫家昶;并行計算環(huán)境與數(shù)值并行算法研究[J];小型微型計算機(jī)系統(tǒng);1995年02期

2 劉羽,盧振曉,邱南輝;基于PVM的機(jī)群實驗系統(tǒng)的建立及應(yīng)用[J];廣西工學(xué)院學(xué)報;2005年02期

3 劉巧英;喬玉蘭;孫玉強(qiáng);;并行技術(shù)領(lǐng)域中調(diào)度算法研究[J];中國科技信息;2009年05期

4 宋君強(qiáng);龔西平;張理論;趙文濤;吳建平;;細(xì)長矩陣的塊正交化方法[J];計算機(jī)工程與科學(xué);2010年04期

5 楊文有;;基于MPI的動態(tài)負(fù)載均衡任務(wù)分配方法設(shè)計實現(xiàn)[J];淮南師范學(xué)院學(xué)報;2010年03期

6 ;2003年全國開放式分布與并行計算學(xué)術(shù)會議(DPCS2003) 征文通知[J];小型微型計算機(jī)系統(tǒng);2002年11期

7 王小偉,郭力,葛蔚,楊章遠(yuǎn);高性能并行集群計算環(huán)境的構(gòu)建與性能測試[J];小型微型計算機(jī)系統(tǒng);2004年03期

8 王小鴿;;關(guān)于多核技術(shù)的幾點思考[J];程序員;2006年09期

9 魏存祥;龔建春;仉洪云;;基于ANSYS的并行計算發(fā)展及實現(xiàn)[J];機(jī)械工程師;2007年10期

10 史維;;基于MPI環(huán)境的并行算法在有限元分析中的應(yīng)用與研究[J];內(nèi)蒙古石油化工;2008年17期

相關(guān)會議論文 前10條

1 王同權(quán);于萬瑞;馮煜芳;;微機(jī)集群的并行蒙特卡羅模擬[A];2006年全國開放式分布與并行計算機(jī)學(xué)術(shù)會議論文集（三）[C];2006年

2 賈美麗;弓建軍;孫承意;;PMEC在集群計算機(jī)上的實現(xiàn)[A];2003年中國智能自動化會議論文集（下冊）[C];2003年

3 周昆;潘益農(nóng);王東勇;朱紅芳;;中尺度數(shù)值模式在IBMP690上的并行測試[A];信息技術(shù)在氣象領(lǐng)域的開發(fā)應(yīng)用論文集（一）[C];2005年

4 莫倩蕓;鐘誠;;機(jī)群系統(tǒng)上并行計算時間序列的動態(tài)彎曲距離[A];2008年全國開放式分布與并行計算機(jī)學(xué)術(shù)會議論文集(下冊)[C];2008年

5 黃宇光;;整體同步并行計算方法的現(xiàn)狀與發(fā)展[A];信息科學(xué)與微電子技術(shù):中國科協(xié)第三屆青年學(xué)術(shù)年會論文集[C];1998年

6 史光梅;何穎波;吳瑞安;莫軍;李陽春;張亞林;;面向?qū)ο笥邢拊⑿杏嬎憧蚣躊ANDA研究進(jìn)展[A];中國計算力學(xué)大會'2010（CCCM2010）暨第八屆南方計算力學(xué)學(xué)術(shù)會議（SCCM8）論文集[C];2010年

7 李燁;梁雄健;;云計算發(fā)展的技術(shù)瓶頸淺析[A];兩化融合與物聯(lián)網(wǎng)發(fā)展學(xué)術(shù)研討會論文集[C];2010年

8 戴濤;楊耀忠;;油藏模擬集群并行負(fù)載平衡技術(shù)研究[A];第九屆全國滲流力學(xué)學(xué)術(shù)討論會論文集（二）[C];2007年

9 吳君輝;曹祥玉;楊逸;;一種車載天線特性的并行計算方法[A];2011年全國微波毫米波會議論文集（下冊）[C];2011年

10 廖振民;袁仙春;;MFIC程序在YH-2機(jī)上的并行計算[A];中國工程物理研究院科技年報（1998）[C];1998年

相關(guān)重要報紙文章 前10條

1 均兒;通用計算核動力[N];電腦報;2009年

2 英特爾并行計算實驗室研究員 TimothyMattson;并行計算:減少串行軟件[N];中國計算機(jī)報;2007年

3 英特爾 趙軍(Jun Zhao);PC機(jī)并行計算革命尚未成功[N];中國計算機(jī)報;2009年

4 ;并行計算成PC產(chǎn)業(yè)發(fā)展瓶頸[N];人民郵電;2008年

5 劉霞;計算能力的提升需要一場革命[N];科技日報;2010年

6 張云泉;并行計算：迎接多核時代的挑戰(zhàn)[N];計算機(jī)世界;2006年

7 陳文光;并行計算的普及與挑戰(zhàn)[N];中國電子報;2008年

8 ;2012年或出現(xiàn)64核心桌面處理器[N];中國電腦教育報;2008年

9 梁敏;“天河一號”牛氣沖天[N];電腦報;2009年

10 英特爾中國區(qū)市場總監(jiān) 莊海鷗;通信與計算融合引領(lǐng)未來[N];網(wǎng)絡(luò)世界;2004年

相關(guān)博士學(xué)位論文 前10條

1 陳軍;分布式存儲環(huán)境下并行計算可擴(kuò)展性的研究與應(yīng)用[D];中國人民解放軍國防科學(xué)技術(shù)大學(xué);2000年

2 盧風(fēng)順;面向CPU/GPU異構(gòu)體系結(jié)構(gòu)的并行計算關(guān)鍵技術(shù)研究[D];國防科學(xué)技術(shù)大學(xué);2012年

3 蘭日清;大型結(jié)構(gòu)三維地震反應(yīng)分析并行計算方法研究[D];中國地震局工程力學(xué)研究所;2012年

4 金晶;并行計算普適編程模型及系統(tǒng)架構(gòu)研究[D];北京郵電大學(xué);2012年

5 劉國勝;高性能計算技術(shù)及其在電磁散射中的應(yīng)用研究[D];華南理工大學(xué);2011年

6 陳娟;低功耗軟件優(yōu)化技術(shù)研究[D];國防科學(xué)技術(shù)大學(xué);2007年

7 胡悅;并行計算時間與存儲空間關(guān)系研究[D];上海大學(xué);2011年

8 王之元;并行計算可擴(kuò)展性分析與優(yōu)化[D];國防科學(xué)技術(shù)大學(xué);2011年

9 戚晶晶;熱物性反問題高效并行算法研究[D];武漢理工大學(xué);2013年

10 易會戰(zhàn);低功耗技術(shù)研究—體系結(jié)構(gòu)和編譯優(yōu)化[D];國防科學(xué)技術(shù)大學(xué);2006年

相關(guān)碩士學(xué)位論文 前10條

1 韓光明;基于機(jī)群計算的熱物性反問題高效分布式并行算法設(shè)計[D];武漢理工大學(xué);2006年

2 卜祥飛;基于DSP的網(wǎng)絡(luò)并行計算系統(tǒng)的設(shè)計與實現(xiàn)[D];云南大學(xué);2010年

3 張建;并行計算機(jī)群的建設(shè)與管理[D];吉林大學(xué);2011年

4 董艷輝;基于Trilinos的并行計算研究及應(yīng)用[D];中國地質(zhì)大學(xué)（北京）;2006年

5 任曉慧;一種新的并行計算機(jī)網(wǎng)絡(luò)[D];山東師范大學(xué);2006年

6 陳科;基于高性能計算機(jī)的并行計算研究[D];大連理工大學(xué);2011年

7 周偉;并行計算在海洋水齡譜模擬中的應(yīng)用研究[D];河北工程大學(xué);2013年

8 常新正;基于GPU的顆粒離散元計算方法研究[D];大連理工大學(xué);2013年

9 于忠亮;并行計算中的I/O問題研究[D];內(nèi)蒙古大學(xué);2010年

10 趙仙勇;基于區(qū)域分解法的鋁電解槽電場有限元分析并行計算研究[D];中南大學(xué);2013年

，

本文編號：1486642