系统自带的日志管理工具-rsyslogd

时间:2021-04-08 21:07:05

              系统自带的日志管理工具-rsyslogd

                                        作者:尹正杰

版权声明:原创作品,谢绝转载!否则将追究法律责任。

一.日志管理简介
1.什么是日志
  系统日志是记录系统中硬件、软件和系统问题的信息,同时还可以监视系统中发生的事件。用户可以通过它来检查错误发生的原因,或者寻找受到攻击时攻击者留下的痕迹。系统日志包括系统日志、应用程序日志和安全日志。
 
2.日志服务
  在CentOS6.x中日志服务已经由rsyslogd取代了原先的syslogd服务。rsyslogd日志服务更加先进,功能更多。但是不论该服务都是用,还是日志文件的格式其实都是和syslogd服务相兼容的,所以学起来基本和syslogd服务一致。
 
3.rsyslogd的新特点
  a>.基于TCP/IP网络协议传输日志信息;
  b>.更安全的网络传输方式;
  c>.有日志消息的及时分析框架;
  d>.后台数据库;
  e>.配置文件中可以写简单的逻辑判断;
  f>.与syslog配置文件相兼容;
确定rsyslogd服务是否启动的方法如下:
 [root@yinzhengjie ~]# ps aux | grep rsyslogd | grep -v grep
root 0.0 0.1 ? Sl : : /sbin/rsyslogd -i /var/run/syslogd.pid -c
[root@yinzhengjie ~]#
[root@yinzhengjie ~]# chkconfig --list rsyslog
rsyslog :off :off :on :on :on :on :off
[root@yinzhengjie ~]#
 
4.常见的日志的作用
日志名称 日志路径 日志功能 备注
定时任务日志 /var/log/cron 记录了系统定时任务相关的日志。  
打印日志 /var/log/cups/ 记录打印信息的日志  
内核日志 /var/log/dmesg 记录了系统在开机时内核自建的信息。也就是使用dmesg命令直接查看内核自检信息。  
登录失败日志 /var/log/btmp 记录错误登录的日志。这个文件是二进制文件,不能直接用vi查看,而是要用lasth命令查看例如:“[root@yinzhengjie ~]# lastb”回车即可。 如果有人攻击你的电脑就这个文件就会有大量的日志信息。
最后登录日志 /var/log/lastlog 记录系统中所有用户最后一次的登录时间的日志。这个文件也是二进制文件,不能直接vi,而要用lastlog命令查看,例如:“[root@yinzhengjie ~]# lastlog ”回车即可。  
邮件日志 /var/log/maillog 记录邮件信息  
系统日志 /var/log/messages 记录系统重要信息的日志。这个日志文件中会记录Linux系统的绝大多数重要信息,如果系统出现问题时,首先要检查的就应该是这个日志文件。 该日志文件默认还会记录一些服务日志哟。
安全日志 /var/log/secure 记录验证和授权方面的信息,只要涉及账户和密码程序的都会记录。比如说系统的登录,ss的登录,su切换用户,sudo授权,甚至添加用户和修改用户密码都会记录在这个日志文件中。  
登录日志 /var/log/wtmp 永久记录所有用户的登录,注销信息,同时记录系统的启动,重启,关机时间。同样这也是一个二进制文件,不能直接vi打开,而需要last命令来查看。“[root@yinzhengjie ~]# last”  
当前登录日志 /var/run/utmp 记录当前已经登录的用户的信息,这个文件会随着用户的登录和注销而不断变化,只记录当前登录用户的信息。同样这个文件也不能直接用vi打开,而是要用,w,who,users等命令来查询。  
 
5.yum方式安装的日志
  除了系统默认的日志之外,采用RPM方式(或yYUM方式)安装的系统服务也会默认把日志记录在“/var/log”目录中(源码包安装的服务日志是在源码包指定目录中)。不过这些日志不是由rsyslogd服务来记录和管理的,而在各个服务使用自己的日志管理文档来记录自身日志。
日志名称 日志路径 日志功能
Apache日志 /var/log/httpd/ RPM包安装的Apache服务端默认日志目录
邮件日志 /var/log/mail/ RPM包安装的邮件服务的额外日志目录
Samba日志 /var/log/samba/ RPM包安装的Samba服务的日志目录
安全服务日志 /var/log/sssd/ 守护进程安全服务目录
 
二.rsyslogd日志服务
1.基本日志格式包含以下四列:
  a>.事件产生的事件;
  b>.发生事件的服务器的主机名;
  c>.产生事件的服务名或程序名;
  d>.事件的具体信息;
系统自带的日志管理工具-rsyslogd
2./etc/rsyslog.conf 配置文件
定义格式如下:
  服务名称[连接符号]日志等级 日志存放位置
系统自带的日志管理工具-rsyslogd
b>.服务名称及其含义说明
服务名称 说明
auth 安全和认证相关信息( 不推荐使用authpriv替代)
authpriv 安全和认证相关信息(私有的)
cron 系统定时任务cront和at产生的日志
daemon 个各个守护进程相关的日志
ftp ftp守护进程产生的日志
kern 内核产生相关的日志(不是用户进程产生的)
local0-local7 为本地服务使用预留的服务
lpr 打印产生的日志
mail 邮件收发信息
news 与新闻服务器相关的日志
syslog 有syslog服务产生的日志信息(虽然服务名称已经改为rsyslogd,但是很多配置都还是沿用了syslogd的,这里名没有修改服务名)
user 用户等级类别的日志信息
uucp uucp子系统的日志信息,uucp是早期Linux系统进行数据传递的协议,后来也常用在新闻组服务中。
c>.连接符号
连接符号可以识别为:
  “*”代表所有日志等级,比如“authpriv.*”代表authpriv认证信息服务产生的日志,所有的日志等级都记录。
  “.”代表只要比后面等级高的(包含该等级)日志都记录下来。比如:“cron.info”代表cron服务产生的日志,只要日志等级大于等于inifo级别,就记录。
  “.=”代表值记录所需等级的日志,其他等级的都不记录。比如:“*.=emerg”代表任何服务日志产生的日志,只要记录是emerg等级就记录。这种用法极少,了解就好。
  “.!”代表不等于,也就是除了该等级的日志外,其他等级的日志都记录。
 
d>.日志等级说明
等级名称 说明
debug 一般的调试信息说明
info 基本的通知信息
notice 普通信息,但是有一定的重要性
warning 警告信息,但是还不会影响到服务或系统的运行
err 错误信息,一般达到err等级的信息以及可以影响到服务或系统的运行了。
crit 临界状况信息,比err等级还要重要
alert 警告状态信息,比crit还要严重,必须立即采取行动
emerg 疼痛等级信息,系统以及无法使用了
e>.日志记录位置
  日志文件绝对路径,如“/var/log/secure”
  系统设备文件,如“/dev/lp0”
  转发给远程主机,如"@192.168.3.210:5200"
  用户名,如“root”
  忽略或丢弃日志,如“~”
 
三.日志轮替
1.日志切割和日志替换
日志切割:
  就是把旧的日志文件移动并改名,同时建立新的日志文件。那么如何命名呢?主要依靠/etc/logrotate.conf配置文件的” dateext ”(系统默认是有该参数的)。如果配置文件拥有“dateext”参数,那么日志就会用日期来作为日志文件的后缀,.如果配置文件啊当中没有“dateext”参数,那么日志文件就需要进行改名。
日志替换:
  当旧的日志超过保存的范围之后,就会自动删除时间较早的日志。
 
2.常用的logrotate.conf参数详解
参数 说明
compress 启用压缩,指的是轮替后的旧日志,这里默认用的是gzip压缩的
compressoptions 以gzip -9的模式压缩
uncompresscmd 解压日志,默认是gunzip
daily 每天轮替选项
dateext 轮替的日志文件会附加上一个短横线和YYYYMMDD格式的时间戳
delaycompress 将以前的日志文件压缩推迟到下一次轮替
ifempty 即使日志文件是空的也轮替
mail 将轮替后的文件发送到指定E-mail地址
copytruncate 用于还在打开中的日志文件,把当前日志备份并截断,开始轮替
mailfirst/maillast 向邮件发送轮替文件/轮替后历史文件(默认)
monthly 一个月轮替一次
nocompress 如果在logrotate.conf中启用了压缩,这里是做不用压缩的参数
nomail 不发送邮件到任何地址
ifempty 如果日志时空的就不轮替
olddir directory 轮替后日志文件放入指定的目录,必须和当前日志文件在同一个文件系统
postrotate/endscript 在做完轮替后的命令,两个关键字必须单独成行,使用的操作在2者之间相当于分组“{}”,注意的使用外部指令时要用绝对路径
prerotate/endscript 在做轮替前的命令,同上
rotate count 轮替最多保留之前的数据几次,超出的将被删除或邮件接收,设为0则不保存
size size 当日志增长到指定大小的时候开始轮替,它不会考虑,例如:size 100k
start count 轮替文件名基于这个数字。
例如,指定0时,原日志文件轮替的备份文件以.0为扩展名,如果指定9,就直接从.9开始跳过0-8
然后再继续向后轮替rotate指定的次数。
weekly 如果当前的星期几比上次轮替的星期几少,或者过了一个多星期,就会发生轮替通常是在每周的第一天轮替,如果logrotate不是每天运行的,会在第一次有机会时进行轮替。
yearly 如果当前年份不同于上次轮替的年份,则进行日志轮替
create mode owner group 在轮替动作之后,postrotate脚本执行之前,立即使用刚轮替的日志文件名创建日志文件。
MODE 指定日志文件的权限(0660之类)
OWNER 指定日志文件的属主
GROUP 指定日志文件的属组
extension ext 日志文件可在轮替后使用指定的EXT扩展名。如果使用压缩,通常EXT后还会加上压缩文件的扩展名,通常是.gz。例如想把mylog.foo轮转为mylog.1.foo.gz而不是mylog.foo.1.gz
 
3.将Apache日志加入轮替
  其实在一般情况下,只有源码安装的软件包才需要我们手动指定轮替,其他yum安装的或是rpm方式安装的全部都是默认的。相信玩Linux的老鸟们早就知道在“[root@yinzhengjie ~]# ls /var/log/”这个目录下回自动有轮替的文件生成,然而我们并没有配置,是因为rsyslogd服务是开机自启的,而且任务的完成依赖于周期性计划任务。
  由于我的Apache是源码安装的,因此我需要手动指定轮替,生产环境中源码安装Apache之后,一定要做轮替,因为你不做轮替的话所有的日志会默认保存在一个文件中的,尤其是游戏公司的网站,一天的访问量大的话可能就得用到1G的磁盘大小。如果文件过大是很难进行查看的哟!下面是我配置细节
 [root@yinzhengjie ~]# more /etc/logrotate.conf  | grep -v ^#  | grep -v ^$
weekly ----->定义全局变量,默认是每周生效。
rotate ------>保留四个日志
create ------->创建新日志
dateext ------->用日期来作为日志文件的后缀
include /etc/logrotate.d ------->加载配置文件
/var/log/wtmp { ------->定义对/var/log/wtmp日志的轮替
monthly ------>按照月进行轮替,并不会被上面定义的weeky影响。
create root utmp
minsize 1M
rotate
}
/var/log/btmp { -------->定义对/var/log/btmp日志的轮替。
missingok
monthly
create root utmp
rotate
}
/yinzhengjie/apache/logs/access_log { ------->这是我源码安装的Apache路径,我们需要给该文件定义轮替。
daily ----->指定按天轮替
create ------>轮替的时候直接创建新的
rotate ------>表示只保留前30天的。 }
[root@yinzhengjie ~]#
[root@yinzhengjie ~]#