機(jī)器學(xué)習(xí)技術(shù)特別是深度學(xué)習(xí)技術(shù)的發(fā)展與日益完善,使得機(jī)器學(xué)習(xí)在企業(yè)中尤其是互聯(lián)網(wǎng)企業(yè)中的應(yīng)用頻率越來越高,使用范圍也越來越廣泛。盡管目前各種機(jī)器學(xué)習(xí)算法的理論基礎(chǔ)日益完善,應(yīng)用機(jī)器學(xué)習(xí)必備的硬件設(shè)備（CPU、GPU、存儲(chǔ)訓(xùn)練數(shù)據(jù)的磁盤等）成本也越來越低,但是在機(jī)器學(xué)習(xí)技術(shù)的應(yīng)用過程中還存在許多其他問題。機(jī)器學(xué)習(xí)屬于比較專業(yè)的領(lǐng)域,而在互聯(lián)網(wǎng)公司中需求是快速迭代的,對(duì)于一個(gè)需要使用到機(jī)器學(xué)習(xí)的小需求,算法建模和參數(shù)調(diào)優(yōu)過程也需要算法工程師的參與,模型開發(fā)的人力成本比較大。而且在模型開發(fā)完成后,如何落地使用對(duì)于只是精通于算法設(shè)計(jì),模型調(diào)優(yōu)的算法工程師來說是個(gè)很大的挑戰(zhàn)。據(jù)知名AI服務(wù)提供商Algorithmia發(fā)布的《2020年企業(yè)機(jī)器學(xué)習(xí)行情》報(bào)告顯示,許多企業(yè)在部署機(jī)器學(xué)習(xí)以及后續(xù)的服務(wù)維護(hù)過程中面臨著許多問題。針對(duì)上述在實(shí)際應(yīng)用機(jī)器學(xué)習(xí)過程中遇到的問題,本文做了相關(guān)的研究并設(shè)計(jì)實(shí)現(xiàn)了一個(gè)一站式機(jī)器學(xué)習(xí)平臺(tái)系統(tǒng)。該系統(tǒng)提供一站式的機(jī)器學(xué)習(xí)解決方案,功能可以覆蓋機(jī)器學(xué)習(xí)業(yè)務(wù)的整個(gè)流程。該系統(tǒng)的核心功能包括:1.通過參數(shù)配置的形式快速構(gòu)建模型訓(xùn)練作業(yè)。2.提供可視化建模工具,大大降低了模型... 

【文章來源】：山東大學(xué)山東省 211工程院校 985工程院校 教育部直屬院校

【文章頁數(shù)】：90 頁

【學(xué)位級(jí)別】：碩士

【部分圖文】：

圖２－１系統(tǒng)功能模塊圖??如上圖所示，一站式機(jī)器學(xué)習(xí)平臺(tái)提供模型訓(xùn)練、可視化建模、模型管理??型服務(wù)等功能

§■？??＾?＾?—?一?????／?？紐含》??／?，——＜：一－－－Ｃ＞異常報(bào)９??／?Ｃ?監(jiān)控報(bào)鳘?｝????／?????＼??／?獅雜??＾——＾??［Ｉ?Ｉ?（＾１丨練強(qiáng)制停??平臺(tái)用戶＼＼＼?ｒ＾＞＞????＼??義二他》－－－＜＾訓(xùn)練啟動(dòng)３??＼?ｃ＾＾＞＇＜Ｍ＞＞?????＼?日志?１＾）???＾?可??、———一????—－＊＊，＾＇＂＇？（Ｓ＾？－－?＿ｙ＾－一???■＞．??型參數(shù)可視??圖２－２模型訓(xùn)練的用例圖??訓(xùn)練作業(yè)注冊(cè)用例描述如表２－１所示。????表２－１參數(shù)配罝用例表????用例編ｆ?ＵＣＱ１?丨用例名稱?丨參數(shù)配置??參與者?平臺(tái)用戶，包括當(dāng)前項(xiàng)目組下的所有用戶以及授權(quán)用戶???用例描述?配置訓(xùn)練參數(shù)，修改訓(xùn)練參數(shù)等???Ｉｍ＾Ｔ?＾用戶登錄到平臺(tái)并且擁有當(dāng)前模型的權(quán)限?＾??某太塞件濃?１．新增訓(xùn)練，填寫相關(guān)訓(xùn)練參數(shù)，平臺(tái)提供默認(rèn)參考參數(shù)。??２．修改已有的訓(xùn)練參數(shù)重新訓(xùn)練。???異常流程?參數(shù)填寫不規(guī)范、集群資源不足等??事件流?若參數(shù)填寫不規(guī)范，平臺(tái)會(huì)自動(dòng)校驗(yàn)修改?＾??非功能性需￥￣￣易用性、健壯性??１現(xiàn)約束和說明?無?￣￣??后置條件?５Ｅ???題?丨無??１１??

?山東大學(xué)碩士學(xué)位論文???可以查看實(shí)驗(yàn)的運(yùn)行記錄，保存實(shí)驗(yàn)效果比較好的模型。??模型構(gòu)建用例圖如圖２－３所示。??可視化建模??件注?－臟校＾＾??／??／??／??／??包／?且件刪．？擴(kuò)展》限校??／?Ｚ??／??／?？＾＃？????＾￣’斧??Ｉ組件管理＾）??？ｒ?展》可運(yùn)行性＾??？包含》??????ｚ，?Ｃ?下載實(shí)驗(yàn)?）《擴(kuò)展》＜?權(quán)限校驗(yàn)?）??ｃ實(shí)驗(yàn)管理）?????????包含??實(shí)驗(yàn)檢索?????干ａ用戶?＜丨包含》??＜＜?包含》??—??行歷史査??圖２－３可視化構(gòu)建模塊的用例圖??組件管理用例描述如表２－５所示。????表２－５組件管理甲例表????用例編號(hào)?ＵＣ０５?｜用例名稱?｜參數(shù)配置??參與者?平臺(tái)用戶，系統(tǒng)管理員???用例描述?訓(xùn)練參數(shù)，修改訓(xùn)練參數(shù)等??前置條件?用戶登錄到平臺(tái)??１．檢索組件，查看組件詳細(xì)介紹和推薦參數(shù)。??基本事件流?２．上傳自定義組件，用戶根據(jù)平臺(tái)提供的模板自定義組件上傳。???｜?３．注冊(cè)組件，平臺(tái)會(huì)定期更新組件庫。???１４??

【參考文獻(xiàn)】：
期刊論文
[1]機(jī)器學(xué)習(xí)技術(shù)的應(yīng)用經(jīng)驗(yàn)及建議探討[J]. 吳建華.  科技創(chuàng)新與應(yīng)用. 2020(07)
[2]加速AI分布式訓(xùn)練研究和實(shí)踐[J]. 朱祥磊.  電信技術(shù). 2019(12)
[3]一個(gè)輕量級(jí)分布式機(jī)器學(xué)習(xí)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[J]. 宋匡時(shí),李翀,張士波.  計(jì)算機(jī)工程. 2020(01)
[4]分布式機(jī)器學(xué)習(xí)平臺(tái)與算法綜述[J]. 舒娜,劉波,林偉偉,李鵬飛.  計(jì)算機(jī)科學(xué). 2019(03)
[5]深度學(xué)習(xí)原理及應(yīng)用綜述[J]. 付文博,孫濤,梁藉,閆寶偉,范福新.  計(jì)算機(jī)科學(xué). 2018(S1)
[6]主流深度學(xué)習(xí)框架對(duì)比[J]. 加日拉·買買提熱衣木,常富蓉,劉晨,要秀宏.  電子技術(shù)與軟件工程. 2018(07)
[7]基于TensorFlow深度學(xué)習(xí)框架的卷積神經(jīng)網(wǎng)絡(luò)研究[J]. 袁文翠,孔雪.  微型電腦應(yīng)用. 2018(02)
[8]基于Spark的機(jī)器學(xué)習(xí)Web服務(wù)引擎設(shè)計(jì)[J]. 夏冉.  指揮控制與仿真. 2018(01)
[9]大數(shù)據(jù)下的典型機(jī)器學(xué)習(xí)平臺(tái)綜述[J]. 焦嘉烽,李云.  計(jì)算機(jī)應(yīng)用. 2017(11)
[10]基于Spark的流程化機(jī)器學(xué)習(xí)分析方法[J]. 趙玲玲,劉杰,王偉.  計(jì)算機(jī)系統(tǒng)應(yīng)用. 2016(12)

博士論文
[1]深度學(xué)習(xí)模型的高效訓(xùn)練算法研究[D]. 陳凱.中國科學(xué)技術(shù)大學(xué) 2016

碩士論文
[1]基于Spark和PU-learning的分布式機(jī)器學(xué)習(xí)平臺(tái)的研究與實(shí)現(xiàn)[D]. 江裕鋒.北京郵電大學(xué) 2019



本文編號(hào)：3543113