可視化日志分析系統(tǒng)的研究與實現.pdf

1、從信息安全風險管理角度來看,針對各類系統(tǒng)的運行日志和用戶網絡訪問行為的審計系統(tǒng)是信息安全保障體系中不可或缺的一部分,因此,日志分析作為網絡安全防御系統(tǒng)的組成部分,在網絡安全中起著重要的作用。一個良好的日志分析系統(tǒng)能夠通過全面的日志及行為分析彌補現有各類技術產品在威脅分析發(fā)現方面的不足,并能夠為安全事故的責任追查、故障定位提供有力的技術手段。
　　 本文在分析了同類產品優(yōu)缺點的基礎上,根據企業(yè)用戶的實際需求,結合數據挖掘技術的發(fā)展

2、,設計和實現了新的可視化日志分析系統(tǒng)。
　　 本文首先介紹了日志分析系統(tǒng)的基本概念,簡要闡述了日志分析系統(tǒng)的重要性,并對國內外一些類似產品作了對比,分析了日志分析系統(tǒng)的發(fā)展趨勢和目前的日志分析系統(tǒng)存在的問題。然后,結合部分企業(yè)對日志分析系統(tǒng)的實際需求,提出了新的日志分析系統(tǒng)所必須滿足的基本功能。
　　 在此基礎上,本文詳細描述了該系統(tǒng)的整體架構、數據庫結構、采集分析模塊的流程、用戶管理界面的結構以及告警引擎接口。重點說明

3、了數據庫的設計原則,討論了海量日志的存儲方法,提出以設備或以時間為基本數據表的存儲方式,在提高查詢效率的同時也極大增加了系統(tǒng)的可維護性；優(yōu)化了數據采集的方式,提出了增加數據緩存區(qū)結合多線程并行處理的方式,極大的提高了系統(tǒng)的吞吐量；提出了日志處理的多層模型,將處理過程分為接收、過濾、合并、分析告警、保存等幾個處理層次,分別闡述了各個處理層次的流程以及關鍵的處理方法,并結合分析過程給出了部分重要的數據結構；描述了日志分析系統(tǒng)中管理程序的設計