基于SYSLOG的集中日志管理系统的研究与实现

论文摘要

日志对于网络的正常运营非常重要。它记录了系统每天发生的各种事件,维护人员可以通过它来检查设备的故障,监控用户的使用行为等。随着网络的快速发展,日志数据量急剧增加,如何对其进行有效地管理,成为迫切需要解决的问题。本文研究的背景是杭州电信承建的杭州市政府数据容灾集中灾备项目,通过对该项目使用的JMCC系列安全存储服务器的日志数据进行集中采集、分析,达到监控网络的安全状况及查看设备故障的目的。本文首先研究了日志管理系统中各个环节的关键技术。通过对其优缺点的分析,结合项目实际情况和需求分析,得出所采用的各项技术。接着,设计系统架构,包括软件和硬件架构以及各模块功能。最后,实现了系统,并对各功能进行了测试。同其它利用日志进行的研究相比较,本文具有如下特点：(1) syslog日志处理的完整流程：从JMCC设备上产生的syslog日志,通过TLS传输,发送到远程集中日志服务器,然后存储到数据库中,进行分析处理。(2) LAMP实现架构：日志服务器采用LAMP平台,它是基于Linux, Apache, MySQL和PHP的开放资源网络开发平台,具有成本低廉、部署灵活、快速开发、安全稳定等特点。(3)权限管理：为了更好保障系统安全,不同级别用户具有不同日志管理权限。

论文目录

• 摘要
• ABSTRACT
• 目录
• 1 绪论
• 1.1 系统研发背景
• 1.2 研发内容和目标
• 1.2.1 研究内容
• 1.2.2 目标
• 1.3 论文特点和组织结构
• 1.3.1 论文特点
• 1.3.2 组织结构
• 2 日志安全管理系统综述
• 2.1 日志管理的基本概念
• 2.1.1 安全软件日志
• 2.1.2 操作系统日志
• 2.1.3 应用日志
• 2.2 日志管理结构
• 2.2.1 典型日志管理结构
• 2.2.2 基于syslog集中日志管理软件
• 2.2.3 安全信息和事件管理软件
• 2.2.4 其他类型的日志管理软件
• 2.2.5 总结
• 2.3 日志管理面临的挑战
• 2.3.1 日志产生和存储
• 2.3.2 日志保护
• 2.3.3 日志分析
• 2.4 日志管理策略
• 3 日志安全管理系统关键技术
• 3.1 日志管理协议
• 3.1.1 日志管理规范
• 3.1.2 日志协议实现
• 3.2 日志产生和采集
• 3.3 日志传输
• 3.3.1 UDP传输方式
• 3.3.2 TCP传输方式
• 3.3.3 TLS传输方式
• 3.4 日志存储
• 3.5 日志分析
• 3.6 日志呈现
• 3.6.1 B/S结构
• 3.6.2 C/S结构
• 4 系统架构设计
• 4.1 项目背景
• 4.2 日志管理需求分析
• 4.3 系统总体架构
• 4.3.1 硬件架构
• 4.3.2 软件架构
• 4.4 各模块设计
• 4.4.1 日志产生和采集模块
• 4.4.2 日志传输设计
• 4.4.3 日志存储设计
• 4.4.4 日志查询和呈现
• 4.4.5 数据库设计
• 5 系统实现
• 5.1 系统实现概述
• 5.2 web界面实现
• 5.2.1 查询功能
• 5.2.2 分页功能
• 5.3 权限实现
• 5.4 数据库管理的实现
• 5.4.1 数据库的备份
• 5.4.2 数据库恢复
• 6 系统测试与结果
• 6.1 测试环境
• 6.2 测试用例
• 6.2.1 时间功能测试
• 6.2.2 日志类型测试
• 6.2.3 示警度测试
• 6.2.4 查询日志标签
• 6.2.5 查询信息
• 6.2.6 综合测试
• 7 总结与展望
• 7.1 总结
• 7.2 展望
• 参考文献
• 本文作者硕士期间参加的科研项目及发表的学术论文
• 致谢