Linux使用logrotate来切割日志文件

linux  /  管理员 发布于 7年前   165

程序在运行的时候为了了解运行状态，会输出日志文件，时间久了日志文件会变得非常大，甚至达到GB级别。我在golang应用里使用logrus包来打日志，配置和使用都很方便，就是没有日志分割的功能，应用在线上运行一个月后日志文件都已经达到上百兆。后来发现了logrotate，这是centos自带的日志分割工具，都不用安装额外组件就能实现定时分割日志。

1.运行原理

logrotate由系统的cron运行，位置在/etc/cron.daily/logrotate

#!/bin/sh/usr/sbin/logrotate -s /var/lib/logrotate/logrotate.status /etc/logrotate.confEXITVALUE=$?if [ $EXITVALUE != 0 ]; then /usr/bin/logger -t logrotate "ALERT exited abnormally with [$EXITVALUE]"fiexit 0

可以看到入口配置文件是/etc/logrotate.conf，依次运行/etc/logrotate.conf.d里的配置文件 如果发现配置的logrotate没有执行，可以看下系统的crond服务有没有开启

2.配置

如果有安装nginx，可以参考nginx里的配置例子

/var/log/nginx/*log { create 0644 nginx nginx daily rotate 10 missingok notifempty compress sharedscripts postrotate  /bin/kill -USR1 `cat /run/nginx.pid 2>/dev/null` 2>/dev/null || true endscript}

第一行定义的是日志文件的路径，可以用*通配，一般可以定义成*.log来匹配所有日志文件。也可以指定多个文件，用空格隔开，比如

/var/log/nginx/access.log /var/log/nginx/error.log { }

花括号里面是日志切割相关的参数，下面是常用的切割参数

1. compress 是否开启压缩，压缩格式gzip
2. 不开启压缩
3. compresscmd 自定义压缩命令
4. compressexty 压缩文件名后缀
5. compressoptions 压缩选项
6. copy 复制一份文件
7. create 后面跟mode owner group，设置新日志文件的权限
8. daily 按天分割
9. weekly 按周分割
10. monthly 按月分割
11. rotate 后面跟数字，表示需要保留的文件历史记录，超过数量就会删除，或者通过邮件发送
12. size 后面跟文件大小，比如100k、100M，超过这个大小后分割
13. missingok 忽略不存在的文件，不报错
14. notifempty 不分割空文件
15. sharedscripts 配合postrotate、prerotate，让他们只执行一次
16. postrotate/endscript 文件分割完后，执行postrotate、endscript之间的命令
17. prerotate/endscript 文件分割完前，执行prerotate、endscript之间的命令
    

下面看几个例子

/var/log/httpd/error.log { rotate 5 mail [email protected] size=100k sharedscripts postrotate  /sbin/killall -HUP httpd endscript}

切割/var/log/httpd/error.log日志文件，超过100k后切割，保留最新的5个历史记录，超过5个的邮件发送到[email protected]，postrotate里的的命令是为了让httpd重新打开日志文件。

/var/lib/mysql/mysqld.log { # create 600 mysql mysql notifempty daily rotate 3 missingok compress postrotate # just if mysqld is really running if test -x /usr/bin/mysqladmin && \ /usr/bin/mysqladmin ping &>/dev/null then /usr/bin/mysqladmin --local flush-error-log \    flush-engine-log flush-general-log flush-slow-log fi endscript}

这是对mysql日志的切割，每天一份，忽略空文件，保留最新3份，使用gzip压缩

/home/wuyuan/log/*.log { su wuyuan wuyuan create 0777 wuyuan wuyuan daily rotate 10 olddir /home/wuyuan/log/old missingok postrotate endscript nocompress}

这是我在用的配置项，对log目录所有.log文件切割，每天一份，保留10份，新文件设定权限777，历史文件保留在old目录里，这样可以方便查看。因为应用程序用的logrus使用append的方式写日志，所以不需要重新打开日志文件，这点logrus做得很不错。

3.测试

写完配置文件后可以手动执行下，来验证是否可用。

logrotate -f /etc/logrotate.d/wuyuan

其中-f 表示强制执行，其他命令可以用help来查看

logrotate --help用法: logrotate [OPTION...] <configfile> -d, --debug Don't do anything, just test (implies -v) -f, --force Force file rotation -m, --mail=command Command to send mail (instead of `/bin/mail') -s, --state=statefile Path of state file -v, --verbose Display messages during rotation -l, --log=STRING Log file --version Display version informationHelp options: -?, --help Show this help message --usage Display brief usage message

没问题的话日志就会被移到old目录下，并带上日期，之前的log文件会被清空

以上就是本文的全部内容，希望对大家的学习有所帮助，也希望大家多多支持。