本文關(guān)鍵詞：一種分布式并行參數(shù)優(yōu)化算法設(shè)計(jì)及其應(yīng)用

  更多相關(guān)文章： 參數(shù)優(yōu)化算法 分布式平臺(tái) Spark算法

【摘要】：并行參數(shù)優(yōu)化算法在科學(xué)計(jì)算中有廣泛應(yīng)用。隨著Spark等分布式平臺(tái)的快速發(fā)展,越來越多并行參數(shù)優(yōu)化算法開始采用分布式平臺(tái)進(jìn)行實(shí)現(xiàn)。如何在Spark等平臺(tái)上設(shè)計(jì)優(yōu)化算法,避免其運(yùn)行效率受到框架固定時(shí)間開銷和網(wǎng)絡(luò)I/O影響,已經(jīng)成為亟需解決的問題。本文設(shè)計(jì)一種分布式與單機(jī)多核并行結(jié)合的參數(shù)優(yōu)化算法,將其劃分為調(diào)度部分和獨(dú)立子問題部分,單機(jī)多核并行算法處理子問題,分布式平臺(tái)負(fù)責(zé)子問題的跨節(jié)點(diǎn)并行。碳通量模型參數(shù)優(yōu)化的實(shí)驗(yàn)結(jié)果表明,改進(jìn)的算法能有效節(jié)省時(shí)間開銷,更快地搜索參數(shù)空間。
【作者單位】： 中國科學(xué)院大學(xué);中國科學(xué)院計(jì)算機(jī)網(wǎng)絡(luò)信息中心;中國科學(xué)院新疆生態(tài)與地理研究所;中國科學(xué)院地理科學(xué)與資源所;
【關(guān)鍵詞】： 參數(shù)優(yōu)化算法 分布式平臺(tái) Spark算法
【基金】：中國科學(xué)院重點(diǎn)部署項(xiàng)目“新疆山區(qū)徑流水資源預(yù)測模型研制”
【分類號(hào)】：TP18
【正文快照】： 3.中國科學(xué)院新疆生態(tài)與地理研究所,新疆烏魯木齊8300114.中國科學(xué)院地理科學(xué)與資源所,北京100101參數(shù)優(yōu)化算法開始采用分布式平臺(tái)進(jìn)行實(shí)現(xiàn)。如何在Spark等平臺(tái)上設(shè)計(jì)優(yōu)化算法,避免其運(yùn)行效率受到框架固定時(shí)間開銷和網(wǎng)絡(luò)I/O影響,已經(jīng)成為亟需解決的問題。本文設(shè)計(jì)一種分布式與，

本文編號(hào)：563235