系統(tǒng)日志故障預(yù)測(cè)中的ELK與LSTM應(yīng)用與實(shí)踐
發(fā)布時(shí)間:2021-11-26 16:05
隨著業(yè)務(wù)系統(tǒng)規(guī)模不斷擴(kuò)大,系統(tǒng)結(jié)構(gòu)也變得十分復(fù)雜,常規(guī)基于規(guī)則的方法已經(jīng)很難判斷多個(gè)系統(tǒng)相互作用下的復(fù)合型故障,也難以對(duì)潛在故障進(jìn)行預(yù)測(cè).本文在多業(yè)務(wù)系統(tǒng)的復(fù)雜場(chǎng)景下,使用ELK平臺(tái)對(duì)日志進(jìn)行集中化管理,梳理出復(fù)雜系統(tǒng)環(huán)境下日志與各業(yè)務(wù)系統(tǒng)、主機(jī)、進(jìn)程之間的關(guān)系,篩選出系統(tǒng)中直接與故障相關(guān)的日志文件,進(jìn)而在深度學(xué)習(xí)框架TensorFlow中使用這些海量數(shù)據(jù)對(duì)LSTM算法模型進(jìn)行訓(xùn)練,從而實(shí)現(xiàn)對(duì)系統(tǒng)的實(shí)時(shí)故障預(yù)測(cè).
【文章來源】:計(jì)算機(jī)系統(tǒng)應(yīng)用. 2020,29(07)
【文章頁數(shù)】:4 頁
【參考文獻(xiàn)】:
期刊論文
[1]基于Spark Streaming的海量日志實(shí)時(shí)處理系統(tǒng)的設(shè)計(jì)[J]. 陸世鵬. 電子產(chǎn)品可靠性與環(huán)境試驗(yàn). 2017(05)
[2]基于Flume的分布式日志采集分析系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)[J]. 陳飛,艾中良. 軟件. 2016(12)
[3]基于Chukwa的大規(guī)模日志智能監(jiān)測(cè)收集方法[J]. 張川,鄧珍榮,鄧星,黃文明. 計(jì)算機(jī)工程與設(shè)計(jì). 2014(09)
碩士論文
[1]基于Spark的網(wǎng)絡(luò)日志分析系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D]. 劉季函(Liu,Chi Han).南京大學(xué) 2014
本文編號(hào):3520489
【文章來源】:計(jì)算機(jī)系統(tǒng)應(yīng)用. 2020,29(07)
【文章頁數(shù)】:4 頁
【參考文獻(xiàn)】:
期刊論文
[1]基于Spark Streaming的海量日志實(shí)時(shí)處理系統(tǒng)的設(shè)計(jì)[J]. 陸世鵬. 電子產(chǎn)品可靠性與環(huán)境試驗(yàn). 2017(05)
[2]基于Flume的分布式日志采集分析系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)[J]. 陳飛,艾中良. 軟件. 2016(12)
[3]基于Chukwa的大規(guī)模日志智能監(jiān)測(cè)收集方法[J]. 張川,鄧珍榮,鄧星,黃文明. 計(jì)算機(jī)工程與設(shè)計(jì). 2014(09)
碩士論文
[1]基于Spark的網(wǎng)絡(luò)日志分析系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D]. 劉季函(Liu,Chi Han).南京大學(xué) 2014
本文編號(hào):3520489
本文鏈接:http://sikaile.net/kejilunwen/jisuanjikexuelunwen/3520489.html
最近更新
教材專著