基于以太網(wǎng)機(jī)群的海量高光譜數(shù)據(jù)處理系統(tǒng)平臺設(shè)計(jì)
本文選題:以太網(wǎng)機(jī)群 + 并行計(jì)算; 參考:《應(yīng)用光學(xué)》2013年04期
【摘要】:在一些大型圖像處理系統(tǒng)中,通過構(gòu)建服務(wù)器機(jī)群網(wǎng)絡(luò),可實(shí)現(xiàn)多臺服務(wù)器并行處理圖像數(shù)據(jù)流。針對高光譜遙感數(shù)據(jù)及處理算法特點(diǎn),設(shè)計(jì)了基于以太網(wǎng)的服務(wù)器機(jī)群海量高光譜數(shù)據(jù)處理系統(tǒng)平臺,平臺由7臺服務(wù)器和1臺千兆網(wǎng)交換機(jī)構(gòu)組成,其中選擇CPU核數(shù)不低于8核的4臺HP刀片服務(wù)器作為并行處理服務(wù)器,在服務(wù)器機(jī)群軟件設(shè)計(jì)中,通過任務(wù)分解、算法流水化處理及網(wǎng)絡(luò)負(fù)載均衡等方法來實(shí)現(xiàn)并行處理。該系統(tǒng)已應(yīng)用在某遙感數(shù)據(jù)處理系統(tǒng)中,多臺服務(wù)器同時寫入SAN盤陣,可實(shí)現(xiàn)6 000Mbps的寫入能力。
[Abstract]:In some large image processing systems, multiple servers can process image data streams in parallel by constructing server cluster network. According to the characteristics of hyperspectral remote sensing data and its processing algorithm, the platform of massive hyperspectral data processing system for server cluster based on Ethernet is designed. The platform is composed of 7 servers and 1 gigabit network switching mechanism. Four HP blade servers with no less than 8 cores of CPU are selected as parallel processing servers. In the design of server cluster software, parallel processing is realized by means of task decomposition, algorithm pipelining and network load balancing. The system has been applied to a remote sensing data processing system. Multiple servers write to San disk array at the same time, and the write capability of 6 000 Mbps can be realized.
【作者單位】: 西安石油大學(xué)計(jì)算機(jī)學(xué)院;中國科學(xué)院西安光學(xué)精密機(jī)械研究所;武警工程大學(xué);
【基金】:國家973項(xiàng)目(2009CB724005)資助
【分類號】:TP393.09
【參考文獻(xiàn)】
相關(guān)期刊論文 前3條
1 母杰;饒長輝;李梅;鄭文佳;;基于FPGA和DSP的自適應(yīng)光學(xué)系統(tǒng)在線性能評估的嵌入式處理平臺設(shè)計(jì)[J];光電工程;2012年06期
2 李長森;馬殙;李婷;;基于FPGA的圖像信息處理平臺設(shè)計(jì)[J];航天控制;2011年06期
3 倪穎杰;王律科;張軍;;基于高性能數(shù)據(jù)挖掘的網(wǎng)絡(luò)海量信息處理平臺[J];計(jì)算機(jī)工程與科學(xué);2009年S1期
【共引文獻(xiàn)】
相關(guān)期刊論文 前10條
1 關(guān)亞林;曾艷奇;逯貴禎;;基于并行計(jì)算環(huán)境的混波室三維仿真[J];中國傳媒大學(xué)學(xué)報(bào)(自然科學(xué)版);2008年03期
2 程克非;羅江華;李紅波;;一種新的基于HPM并行計(jì)算性能數(shù)據(jù)采集方法[J];重慶郵電大學(xué)學(xué)報(bào)(自然科學(xué)版);2011年01期
3 王結(jié)臣;王豹;胡瑋;張輝;;并行空間分析算法研究進(jìn)展及評述[J];地理與地理信息科學(xué);2011年06期
4 阮定益;;并行式matlab平臺搭建[J];電腦知識與技術(shù);2008年08期
5 胡海峰;;樹狀成本估算模型的并行處理[J];電腦知識與技術(shù);2009年28期
6 古奮飛;王良俠;;淺析Linux集群技術(shù)[J];電腦知識與技術(shù);2010年06期
7 古奮飛;王良俠;張莉;;基于Linux集群的高性能低成本的校園網(wǎng)解決方案[J];電腦知識與技術(shù);2012年02期
8 李焱;胡祥云;金鋼燮;吳桂桔;廖國忠;王程;;基于MPI的一維大地電磁并行計(jì)算研究[J];地球物理學(xué)進(jìn)展;2010年05期
9 李焱;胡祥云;吳桂桔;葉益信;廖國忠;;基于MPI的二維大地電磁正演的并行計(jì)算[J];地震地質(zhì);2010年03期
10 劉曉群;鄒欣;范虹;;基于并行云計(jì)算模式的建筑結(jié)構(gòu)設(shè)計(jì)[J];電子技術(shù)應(yīng)用;2011年10期
相關(guān)會議論文 前7條
1 肖永浩;黃清南;;基于分塊數(shù)據(jù)結(jié)構(gòu)的沖擊問題并行計(jì)算[A];中國計(jì)算力學(xué)大會'2010(CCCM2010)暨第八屆南方計(jì)算力學(xué)學(xué)術(shù)會議(SCCM8)論文集[C];2010年
2 李根;李連崇;唐春安;唐世斌;王振;;巖石流固/熱固作用下?lián)p傷演化并行分析系統(tǒng)及應(yīng)用[A];中國計(jì)算力學(xué)大會'2010(CCCM2010)暨第八屆南方計(jì)算力學(xué)學(xué)術(shù)會議(SCCM8)論文集[C];2010年
3 張亞林;吳錦龍;李于鋒;趙曉平;;PANDA軟件框架的應(yīng)用模板研究[A];中國計(jì)算力學(xué)大會'2010(CCCM2010)暨第八屆南方計(jì)算力學(xué)學(xué)術(shù)會議(SCCM8)論文集[C];2010年
4 董延華;張曄;白文秀;;影響基于PC集群系統(tǒng)的因素研究[A];第六屆全國信息獲取與處理學(xué)術(shù)會議論文集(2)[C];2008年
5 武艷強(qiáng);江在森;楊國華;;最小二乘配置方法在提取GPS時間序列信息中的應(yīng)用[A];GPS技術(shù)應(yīng)用研究論文專輯[C];2007年
6 張志敏;梁逸曾;王家俊;;并行交互檢驗(yàn)方法及其在近紅外光譜中的應(yīng)用[A];中國化學(xué)會第26屆學(xué)術(shù)年會化學(xué)信息學(xué)與化學(xué)計(jì)量學(xué)分會場論文集[C];2008年
7 程煜峰;徐幼平;普業(yè);;并行計(jì)算在數(shù)值預(yù)報(bào)模式中的應(yīng)用[A];第28屆中國氣象學(xué)會年會——S17第三屆研究生年會[C];2011年
相關(guān)博士學(xué)位論文 前10條
1 陸軍;基于組合學(xué)的數(shù)據(jù)編碼方法研究[D];哈爾濱工程大學(xué);2010年
2 程湯培;地下水流動數(shù)值模擬的高效并行計(jì)算研究[D];中國地質(zhì)大學(xué)(北京);2011年
3 劉苗;基于認(rèn)知無線電的PAPR優(yōu)化算法及ICI抑制算法的研究[D];吉林大學(xué);2011年
4 吳超;信息檢索中top-k問題的并行算法及優(yōu)化研究[D];中國科學(xué)技術(shù)大學(xué);2011年
5 李明國;混凝土梁橋?yàn)r青鋪裝結(jié)構(gòu)分析與材料優(yōu)化研究[D];長安大學(xué);2011年
6 董強(qiáng);幾類規(guī)則互連網(wǎng)絡(luò)的嵌入與容錯嵌入研究[D];重慶大學(xué);2010年
7 刁克功;分區(qū)管理模式給水管網(wǎng)的水力分析與模擬技術(shù)研究[D];北京工業(yè)大學(xué);2011年
8 龔春葉;面向異構(gòu)體系結(jié)構(gòu)的粒子輸運(yùn)并行算法研究[D];國防科學(xué)技術(shù)大學(xué);2011年
9 李根;基于模擬的水巖耦合變形破壞過程及機(jī)理研究[D];大連理工大學(xué);2011年
10 劉釗;基于計(jì)算智能的計(jì)算機(jī)視覺及其應(yīng)用研究[D];武漢科技大學(xué);2011年
相關(guān)碩士學(xué)位論文 前10條
1 朱圣鑫;并行GPBiCG(m,,l)算法與預(yù)處理技術(shù)[D];中國工程物理研究院;2010年
2 蘭任;基于并行混合粒子群算法的蛋白質(zhì)結(jié)構(gòu)預(yù)測[D];大連理工大學(xué);2010年
3 高和東;GPU并行計(jì)算在LSSVM建模中的研究與應(yīng)用[D];大連理工大學(xué);2010年
4 張晶;ABEEMσπ/MM模型中能量求解的并行化[D];遼寧師范大學(xué);2010年
5 田野;環(huán)境衛(wèi)星光學(xué)影像自動配準(zhǔn)算法研究與并行實(shí)現(xiàn)[D];遼寧工程技術(shù)大學(xué);2009年
6 羅r
本文編號:2095091
本文鏈接:http://sikaile.net/guanlilunwen/ydhl/2095091.html