Linux系统日志管理、同步、采集、分析

首先，了解Linux系统日志的五种分类：

/var/log/messages     ##系统服务及日志，包括服务的信息，报错等等
/var/log/secure       ##系统认证信息日志
/var/log/maillog      ##系统邮件服务信息
/var/log/cron         ##系统定时任务信息
/var/log/boot.log     ##系统启动信息

日志管理服务rsyslog介绍

rsyslog负责采集日志和分类存放日志，rsyslog的主配置文件为/etc/rsyslog.conf, 大多数日志文件都位于 /var/log/ 目录中。

/etc/rsyslog.conf分类存放日志的格式：

日志设备(类型).(连接符号)日志级别 日志处理方式(action)

各字段指代内容：

####日志设备(类型)####
auth                    ##pam产生的日志
authpriv                ##ssh,ftp等登录信息的验证信息
cron                    ##时间任务相关
kern                    ##内核
lpr                     ##打印
mail                    ##邮件
mark(syslog)–rsyslog    ##服务内部的信息,时间标识
news                    ##新闻组
user                    ##用户程序产生的相关信息
uucp                    ##unix to unix copy, unix主机之间相关的通讯
local 1~7               ##自定义的日志设备

####日志级别####
debug               ##有调式信息的，日志信息最多
info                ##般信息的日志，最常用
notice              ##最具有重要性的普通条件的信息
warning             ##警告级别
err                 ##错误级别，阻止某个功能或者模块不能正常工作的信息
crit                ##严重级别，阻止整个系统或者整个软件不能正常工作的信息
alert               ##需要立刻修改的信息
emerg
4000
##内核崩溃等严重信息
none                ##什么都不记录

####连接符号####
.xxx: 表示大于等于xxx级别的信息
.=xxx：表示等于xxx级别的信息
.!xxx：表示在xxx之外的等级的信息

日志的同步

1.关闭两台主机的防火墙

systemctl stop firewalld

2.修改日志发送方配置文件/etc/rsyslog.conf

*.*         @172.25.254.23  ##通过udp协议把所有类型所有级别日志发送到232主机，@udp，@@tcp

3.修改日志接收方配置文件/etc/rsyslog.conf

15 $ModLoad imudp           ##日志接收插件
16 $UDPServerRun 514        ##日志接收插件使用端口

4.两边清空系统日志

> /var/log/messages

5.发送方产生测试信息

logger test message             ##日志发送方

6.接收方查看日志

tail -f /var/log/message        ##日志接收方

日志的采集格式

修改配置文件/etc/rsyslog.conf

$template WESTOS, "%timegenerated% %FROMHOST-IP% %syslogtag% %msg%\n"

**引号内字段释义如下**
%timegenerated%         ##显示日志时间
%FROMHOST-IP%           ##显示主机ip
%syslogtag%         ##日志记录目标
%msg%               ##日志内容
\n              ##换行

$ActionfileDefaultTemplate WESTOS

*.info;mail.none;authpriv.none;cron.none                /var/log/messages;<<WESTOS>>

产生几组测试数据，可看到日志文件按新格式显示

Jul 26 04:48:09 127.0.0.1 systemd: Stopping System Logging Service...
Jul 26 04:48:09 127.0.0.1 systemd: Starting System Logging Service...
Jul 26 04:48:49 127.0.0.1 systemd: Started System Logging Service.

日志分析工具journal

systemd-journald        ##journal工具的进程名称

journalctl              ##直接执行，浏览系统日志
-n 3                    ##显示最新3条
-p err                  ##显示报错
-f                      ##监控日志
--since --until         ## --since "[YYYY-MM-DD] [hh:mm:ss]" 从什么时间到什么时间的日志
-o verbose              ##显示日志能够使用的详细进程参数
##_SYSTEMD_UNIT=sshd.service服务名称
##_PID=1182进程pid