运维日志切割--logrotate
一、logrotate介绍
logrotate程序是一个日志文件管理工具。用于分割日志文件，删除旧的日志文件，并创建新的日志文件，起到"转储"作用。可以节省磁盘空间。例如，你可以设置logrotate，让/var/log/logfile日志文件每30天轮循，并删除超过6个月的日志。配置完后，logrotate的运作完全自动化，不必进行任何进一步的人为干预。
二、logrotae配置使用
2.1、logrotate安装
1）系统版本
[root@test206 ~]#cat /etc/redhat-release CentOS Linux release 7.6.1810 (Core) [root@test206 ~]#uname -r 3.10.0-957.21.3.el7.x86_64
2）默认centos系统安装自带logrotate，直接使用yum 安装
3）安装包说明
[root@test206 ~]#rpm -ql logrotate /etc/cron.daily/logrotate #Logrotate是基于CRON来运行的，其脚本是/etc/cron.daily/logrotate /etc/logrotate.conf #logrotate 自身的配置文件 /etc/logrotate.d #配置切割设置的目录 /etc/rwtab.d/logrotate /usr/sbin/logrotate /usr/share/doc/logrotate-3.8.6 /usr/share/doc/logrotate-3.8.6/CHANGES /usr/share/doc/logrotate-3.8.6/COPYING /usr/share/man/man5/logrotate.conf.5.gz /usr/share/man/man8/logrotate.8.gz /var/lib/logrotate /var/lib/logrotate/logrotate.status #日志切割的状态信息 #注意 logrotate的配置文件是/etc/logrotate.conf，通常不需要对它进行修改。 日志文件的轮循设置在独立的配置文件中，它（们）放在/etc/logrotate.d/目录下。
2.2、配置参数说明
2.2.1、主配置文件
[root@test206 ~]#cat /etc/logrotate.conf
weekly #默认每一周执行一次rotate轮转工作
rotate 4 #保留多少个日志文件(轮转几次).默认保留四个.就是指定日志文件删除之前轮转的次数，0 指没有备份
create #自动创建新的日志文件，新的日志文件具有和原来的文件相同的权限；因为日志被改名,因此要创建一个新的来继续存储之前的日志
dateext #切割后的日志文件以当前日期为格式结尾，如xxx.log-20131216,注释掉,切割出来是按数字递增,即xxx.log-1这种格式
compress #是否通过gzip压缩转储以后的日志文件，如xxx.log-20131216.gz ；如果不需要压缩，注释掉就行
include /etc/logrotate.d #将 /etc/logrotate.d/ 目录中的所有文件都加载进来
# 这个 wtmp 可记录用户登录系统及系统重启的时间
# 因为有 minsize 的参数，因此不见得每个月一定会执行一次喔.要看文件大小。
/var/log/wtmp { #仅针对 /var/log/wtmp 所设定的参数
monthly #每月一次切割,取代默认的一周
create 0664 root utmp #文件大小超过 1M 后才会切割
minsize 1M #指定新建的日志文件权限以及所属用户和组
rotate 1 #只保留一个日志.
}
/var/log/btmp { ##仅针对 /var/log/wtmp 所设定的参数
missingok
monthly
create 0600 root utmp
rotate 1
}
2.2.2、日志轮转脚本
#Logrotate是基于CRON来运行的，其脚本是/etc/cron.daily/logrotate，日志轮转是系统自动完成的。
[root@test206 ~]#cat /etc/cron.daily/logrotate
#!/bin/sh
/usr/sbin/logrotate -s /var/lib/logrotate/logrotate.status /etc/logrotate.conf
EXITVALUE=$?
if [ $EXITVALUE != 0 ]; then
/usr/bin/logger -t logrotate "ALERT exited abnormally with [$EXITVALUE]"
fi
exit 02.2.2、其他重要参数说明
compress #通过gzip 压缩转储以后的日志 nocompress #不做gzip压缩处理 copytruncate #用于还在打开中的日志文件，把当前日志备份并截断；是先拷贝再清空的方式，拷贝和清空之间有一个时间差，可能会丢失部分日志数据。 nocopytruncate #备份日志文件不过不截断 create mode owner group #轮转时指定创建新文件的属性，如create 0777 nobody nobody nocreate #不建立新的日志文件 delaycompress #和compress 一起使用时，转储的日志文件到下一次转储时才压缩 nodelaycompress #覆盖 delaycompress 选项，转储同时压缩。 missingok #如果日志丢失，不报错继续滚动下一个日志 errors address #专储时的错误信息发送到指定的Email 地址 ifempty #即使日志文件为空文件也做轮转，这个是logrotate的缺省选项。 notifempty #当日志文件为空时，不进行轮转 mail address #把转储的日志文件发送到指定的E-mail 地址 nomail #转储时不发送日志文件 olddir directory #转储后的日志文件放入指定的目录，必须和当前日志文件在同一个文件系统 noolddir #转储后的日志文件和当前日志文件放在同一个目录下 sharedscripts #运行postrotate脚本，作用是在所有日志都轮转后统一执行一次脚本。如果没有配置这个，那么每个日志轮转后都会执行一次脚本 prerotate #在logrotate转储之前需要执行的指令，例如修改文件的属性等动作；必须独立成行 postrotate #在logrotate转储之后需要执行的指令，例如重新启动 (kill -HUP) 某个服务！必须独立成行 daily #指定转储周期为每天 weekly #指定转储周期为每周 monthly #指定转储周期为每月 rotate count #指定日志文件删除之前转储的次数，0 指没有备份，5 指保留5 个备份 dateext #使用当期日期作为命名格式 dateformat .%s #配合dateext使用，紧跟在下一行出现，定义文件切割后的文件名，必须配合dateext使用，只支持 %Y %m %d %s 这四个参数 size(或minsize) log-size #当日志文件到达指定的大小时才转储，log-size能指定bytes(缺省)及KB (sizek)或MB(sizem).当日志文件 >= log-size 的时候就转储。 以下为合法格式：（其他格式的单位大小写没有试过） #size = 5 或 size 5 （>= 5 个字节就转储） #size = 100k 或 size 100k #size = 100M 或 size 100M
2.3、logrotate相关命令
#logrotate命令格式： logrotate [OPTION...] <configfile> -d, --debug #debug模式，测试配置文件是否有错误。 -f, --force #强制转储文件。 -m, --mail=command #压缩日志后，发送日志到指定邮箱。 -s, --state=statefile #使用指定的状态文件。 -v, --verbose #显示转储过程。 #如果等不及cron自动执行日志轮转，想手动强制切割日志，需要加-f参数；不过正式执行前最好通过Debug选项来验证一下（-d参数），这对调试也很重要 /usr/sbin/logrotate -f /etc/logrotate.d/nginx /usr/sbin/logrotate -d -f /etc/logrotate.d/nginx #根据日志切割设置进行操作，并显示详细信息 /usr/sbin/logrotate -v /etc/logrotate.conf /usr/sbin/logrotate -v /etc/logrotate.d/php #根据日志切割设置进行执行，并显示详细信息,但是不进行具体操作，debug模式 /usr/sbin/logrotate -d /etc/logrotate.conf /usr/sbin/logrotate -d /etc/logrotate.d/nginx #查看各log文件的具体执行情况 cat /var/lib/logrotate/logrotate.status
三、logrotate切割tomcat catalina.out日志
一般在部署Tomcat后，运行久了，catalina.out文件会越来越大，甚至上G，对系统的稳定造成了一定的影响
3.1、定义tomcat pid文件
[root@test206 ~]#vim /usr/java/tomcat/dianchou-app-boss/bin/catalina.sh # Get standard environment variables PRGDIR=`dirname "$PRG"` CATALINA_PID=/usr/java/tomcat/dianchou-app-boss/tomcat.pid
3.2、重启tomcat并查看pid文件
[root@test206 bin]#./shutdown.sh [root@test206 bin]#./startup.sh [root@test206 bin]#cd ../ [root@test206 dianchou-app-boss]#ll tomcat.pid -rw-r--r-- 1 root root 6 Nov 12 20:48 tomcat.pid [root@test206 dianchou-app-boss]#cat tomcat.pid 19472
3.3、配置logrotate切割文件
[root@test206 ~]#vim /etc/logrotate.d/tomcat_appboss_catalina
/usr/java/tomcat/dianchou-app-boss/logs/catalina.out {
daily
rotate 15
missingok
notifempty
dateext
compress
delaycompress
sharedscripts
create 644 root root
postrotate
if [ -f /usr/java/tomcat/dianchou-app-boss/tomcat.pid ]; then
kill -USR1 `cat /usr/java/tomcat/dianchou-app-boss/tomcat.pid` #测试杀死了进程，但没重新启动
rm -f /usr/java/tomcat/dianchou-app-boss/tomcat.pid #删除pid文件，不然报错
/usr/java/tomcat/dianchou-app-boss/bin/startup.sh #重启tomcat，重新生成pid文件
fi
endscript
}
#USR1信号解释
1、USR1亦通常被用来告知应用程序重载配置文件；例如，向Apache HTTP服务器发送一个USR1信号将导致以下步骤的发生：停止接受新的连接，等待当前连接停止，重新载入配置文件，重新打开日志文件，重启服务器，从而实现相对平滑的不关机的更改。
2、在没有执行kill -USR1 `cat ${pid_path}`之前，即便已经对文件执行了mv命令而改变了文件名称，tomcat还是会向新命名的文件" xxx.out_ 20180619"照常写入日志数据的。原因在于：linux系统中，内核是根据文件描述符来找文件的。3.4、测试执行
[root@test206 logs]#ll catalina.out* -rw-r--r-- 1 root root 6241051 Nov 12 20:48 catalina.out [root@test206 logs]#logrotate -vf /etc/logrotate.d/tomcat_appboss_catalina reading config file /etc/logrotate.d/tomcat_appboss_catalina Allocating hash table for state file, size 15360 B Handling 1 logs rotating pattern: /usr/java/tomcat/dianchou-app-boss/logs/catalina.out forced from command line (15 rotations) empty log files are not rotated, old logs are removed considering log /usr/java/tomcat/dianchou-app-boss/logs/catalina.out log needs rotating rotating log /usr/java/tomcat/dianchou-app-boss/logs/catalina.out, log->rotateCount is 15 dateext suffix '-20191112' glob pattern '-[0-9][0-9][0-9][0-9][0-9][0-9][0-9][0-9]' glob finding logs to compress failed glob finding old rotated logs failed renaming /usr/java/tomcat/dianchou-app-boss/logs/catalina.out to /usr/java/tomcat/dianchou-app-boss/logs/catalina.out-20191112 creating new /usr/java/tomcat/dianchou-app-boss/logs/catalina.out mode = 0644 uid = 0 gid = 0 running postrotate script Using CATALINA_BASE: /usr/java/tomcat/dianchou-app-boss Using CATALINA_HOME: /usr/java/tomcat/dianchou-app-boss Using CATALINA_TMPDIR: /usr/java/tomcat/dianchou-app-boss/temp Using JRE_HOME: /usr Using CLASSPATH: /usr/java/tomcat/dianchou-app-boss/bin/bootstrap.jar:/usr/java/tomcat/dianchou-app-boss/bin/tomcat-juli.jar Using CATALINA_PID: /usr/java/tomcat/dianchou-app-boss/tomcat.pid Tomcat started. [root@test206 logs]#ll catalina.out* -rw-r--r-- 1 root root 4594 Nov 12 20:56 catalina.out -rw-r--r-- 1 root root 6241051 Nov 12 20:48 catalina.out-20191112 #后续切割时会对前面的日志进行压缩
3.5、设置定时任务
[root@test206 ~]#crontab -l #logrotate tomcat 59 23 * * * /usr/sbin/logrotate -vf /etc/logrotate.d/tomcat_appboss_catalina &>/dev/null
参考文档：
作者：Lawrence
-------------------------------------------
个性签名：独学而无友，则孤陋而寡闻。做一个灵魂有趣的人！
扫描上面二维码关注我
如果你真心觉得文章写得不错，而且对你有所帮助，那就不妨帮忙“推荐"一下，您的“推荐”和”打赏“将是我最大的写作动力！
本文版权归作者所有，欢迎转载，但未经作者同意必须保留此段声明，且在文章页面明显位置给出原文连接.
