發(fā)布時間：2018-03-31 02:29

  本文選題：網(wǎng)絡(luò)安全　切入點：日志分析　出處：《計算機應(yīng)用與軟件》2014年08期

【摘要】：網(wǎng)絡(luò)日志分析對網(wǎng)絡(luò)安全管理具有重要意義,但現(xiàn)有的網(wǎng)絡(luò)日志分析系統(tǒng)具有無法處理海量日志數(shù)據(jù)、采用離線模式、處理時延較長等弊端。因此,提出網(wǎng)絡(luò)日志數(shù)據(jù)的分級歸檔機制,實現(xiàn)海量數(shù)據(jù)的分級優(yōu)化存儲功能。通過將傳統(tǒng)的網(wǎng)絡(luò)日志分析模式和基于Hadoop的離線處理模式相結(jié)合,設(shè)計基于Hadoop的在線網(wǎng)絡(luò)日志分析系統(tǒng),并深入分析系統(tǒng)的功能架構(gòu)和業(yè)務(wù)處理流程。實驗結(jié)果表明:該系統(tǒng)具有良好的可擴展性,可以有效存儲處理海量日志數(shù)據(jù),具有較快的請求響應(yīng)速度,并能夠滿足在線處理的要求。從而驗證了系統(tǒng)設(shè)計的可行性和有效性。
[Abstract]:Network log analysis is of great significance to network security management, but the existing network log analysis system is unable to deal with massive log data, adopts off-line mode, and has many disadvantages such as long time delay and so on.Therefore, the hierarchical archiving mechanism of network log data is proposed to realize the hierarchical optimization storage function of massive data.By combining the traditional network log analysis mode with the offline processing mode based on Hadoop, an online network log analysis system based on Hadoop is designed, and the function structure and business processing flow of the system are analyzed in depth.Experimental results show that the system has good scalability, can effectively store and process massive log data, has a faster request response speed, and can meet the requirements of online processing.The feasibility and effectiveness of the system design are verified.
【作者單位】： 黃淮學(xué)院信息工程學(xué)院;黃淮學(xué)院網(wǎng)絡(luò)信息管理中心;
【基金】：河南省科技攻關(guān)計劃項目(122102310474)
【分類號】：TP393.08

【相似文獻】

相關(guān)期刊論文 前10條

1 史興鍵,李偉華,王文奇;基于優(yōu)化聚類算法的安全審計模型[J];計算機工程與應(yīng)用;2005年17期

2 劉靜,郭秀麗;基于Webalizer的Web服務(wù)器日志分析[J];山東電子;2004年02期

3 徐騰;;探析電子證據(jù)在計算機犯罪中的取證研究[J];自動化與儀器儀表;2011年04期

4 費宗蓮;;Fortinet提供網(wǎng)絡(luò)安全新產(chǎn)品 集中式日志分析報表系統(tǒng)[J];計算機安全;2006年04期

5 周穎;;如何利用AWStats對VSFTP日志進行分析、統(tǒng)計[J];科技信息;2006年04期

6 梁曉雪;王鋒;;基于聚類的日志分析技術(shù)綜述與展望[J];云南大學(xué)學(xué)報(自然科學(xué)版);2009年S1期

7 陳庭平;沈麗娟;曾鵬;;日志服務(wù)器建設(shè)和應(yīng)用[J];網(wǎng)絡(luò)安全技術(shù)與應(yīng)用;2010年09期

8 段生林;基于防病毒軟件的日志分析系統(tǒng)的設(shè)計與實現(xiàn)[J];華南金融電腦;2004年12期

9 金花;黃明;梁旭;;基于Frame頁面過濾的Web日志挖掘中的數(shù)據(jù)預(yù)處理方法[J];大連鐵道學(xué)院學(xué)報;2006年02期

10 王家蘭;王余旺;;基于Web日志分析的Web Qos研究[J];電腦知識與技術(shù)(學(xué)術(shù)交流);2007年19期

相關(guān)會議論文 前10條

1 陳晨;鄭康鋒;;一種基于支持向量機的蜜網(wǎng)系統(tǒng)日志分析方法[A];2011年通信與信息技術(shù)新進展——第八屆中國通信學(xué)會學(xué)術(shù)年會論文集[C];2011年

2 張蓮;鐘誠;;校園計算機網(wǎng)絡(luò)病毒檢測系統(tǒng)設(shè)計與實現(xiàn)[A];計算機技術(shù)與應(yīng)用進展——全國第17屆計算機科學(xué)與技術(shù)應(yīng)用（CACIS）學(xué)術(shù)會議論文集（下冊）[C];2006年

3 趙艷;許榕生;;信息安全綜合審計系統(tǒng)的研究綜述[A];第十三屆全國核電子學(xué)與核探測技術(shù)學(xué)術(shù)年會論文集（下冊）[C];2006年

4 陳慶章;王磊;毛科技;戴國勇;;基于防火墻日志的在線攻擊偵查系統(tǒng)的設(shè)計與實現(xiàn)(英文)[A];全國第19屆計算機技術(shù)與應(yīng)用（CACIS）學(xué)術(shù)會議論文集（下冊）[C];2008年

5 金松昌;方濱興;楊樹強;賈焰;;基于Hadoop的網(wǎng)絡(luò)安全日志分析系統(tǒng)的設(shè)計與實現(xiàn)[A];全國計算機安全學(xué)術(shù)交流會論文集·第二十五卷[C];2010年

6 劉莉;;基于多協(xié)議技術(shù)的日志集中管理安全方案[A];2008年中國通信學(xué)會無線及移動通信委員會學(xué)術(shù)年會論文集[C];2008年

7 周濤;;基于數(shù)據(jù)挖掘的入侵檢測日志分析技術(shù)研究[A];第二屆中國科學(xué)院博士后學(xué)術(shù)年會暨高新技術(shù)前沿與發(fā)展學(xué)術(shù)會議程序冊[C];2010年

8 沈衛(wèi)超;;網(wǎng)絡(luò)流量統(tǒng)計與安全審計系統(tǒng)的設(shè)計與實現(xiàn)[A];中國工程物理研究院科技年報（2001）[C];2001年

9 米愛中;鐘誠;魯曉明;羅程;楊鋒;;基于UML的校園網(wǎng)病毒報警系統(tǒng)的分析與設(shè)計[A];全國第16屆計算機科學(xué)與技術(shù)應(yīng)用（CACIS）學(xué)術(shù)會議論文集[C];2004年

10 齊法制;王彥明;崔濤;安德海;;網(wǎng)絡(luò)日志信息采集與分析系統(tǒng)的設(shè)計與實現(xiàn)[A];第十五屆全國核電子學(xué)與核探測技術(shù)學(xué)術(shù)年會論文集[C];2010年

相關(guān)重要報紙文章 前10條

1 王婷;IDC增值服務(wù)：網(wǎng)站日志分析[N];計算機世界;2001年

2 ;日志分析中的五個誤區(qū)[N];網(wǎng)絡(luò)世界;2004年

3 重慶 航行者;IIS的安全[N];電腦報;2002年

4 陳代壽;網(wǎng)管的四兩撥千斤[N];中國計算機報;2004年

5 周永生;讓Linux更安全[N];網(wǎng)絡(luò)世界;2002年

6 shotgun;入侵檢測初步（上）[N];電腦報;2001年

7 ;三項全能的“軟衛(wèi)甲”[N];網(wǎng)絡(luò)世界;2004年

8 中科院計算所 李洋;使用Webalizer進行網(wǎng)絡(luò)流量日志分析[N];計算機世界;2006年

9 米持平;搭建統(tǒng)一的安全管理平臺[N];網(wǎng)絡(luò)世界;2005年

10 侯小東;防火墻和安全審計[N];中國計算機報;2003年

相關(guān)博士學(xué)位論文 前4條

1 王玲;網(wǎng)絡(luò)服務(wù)系統(tǒng)日志安全分析技術(shù)研究[D];中國科學(xué)院研究生院（計算技術(shù)研究所）;2006年

2 魏偉杰;面向服務(wù)替換的服務(wù)行為模式獲取及推薦[D];東北大學(xué);2009年

3 劉雪梅;服務(wù)器端軟件性能分析和診斷方法研究[D];哈爾濱工程大學(xué);2010年

4 趙潔;面向Web的企業(yè)競爭情報獲取研究[D];中國科學(xué)技術(shù)大學(xué);2013年

相關(guān)碩士學(xué)位論文 前10條

1 楊華;可視化日志分析系統(tǒng)的研究與實現(xiàn)[D];西安電子科技大學(xué);2010年

2 薛文娟;基于層次聚類的日志分析技術(shù)研究[D];山東師范大學(xué);2013年

3 韓冰;政府網(wǎng)站分布式日志存儲與分析系統(tǒng)研究[D];曲阜師范大學(xué);2014年

4 尚魏;多源日志安全信息的融合技術(shù)研究[D];哈爾濱工程大學(xué);2010年

5 周兵斌;NIDS警報日志分析系統(tǒng)設(shè)計與實現(xiàn)[D];合肥工業(yè)大學(xué);2004年

6 張旭暉;面向SaaS模式的應(yīng)用軟件日志架構(gòu)設(shè)計與實現(xiàn)[D];燕山大學(xué);2010年

7 宋愛青;基于Hadoop的日志分析系統(tǒng)的設(shè)計與實現(xiàn)[D];中國地質(zhì)大學(xué)(北京);2012年

8 鄧海川;日志分析系統(tǒng)的任務(wù)調(diào)度方法研究[D];南京航空航天大學(xué);2013年

9 鄭長慶;基于日志分析的網(wǎng)絡(luò)監(jiān)視系統(tǒng)的設(shè)計與實現(xiàn)[D];浙江大學(xué);2005年

10 王振亞;基于MFI-WT算法的蜜網(wǎng)日志分析研究[D];北京郵電大學(xué);2013年

，

本文編號：1688777