Linux按时间分割日志

一、由来:需要做一个定时任务定期从MySQL数据库同步数据到Oracle,5m/次,同步日志写在一个文件恐有不妥,故而需要分割,一般按天,这里为了调试,按分操作。

 

  1.任务如下:分别指定任务的脚本,任务读取文件路径,任务日志输出;

  #vim kettle.sh
2 /usr/etc/tools/pendaho/data-integration/kitchen.sh -file=/usr/etc/tools/pendaho/kettle/works.kjb -level=Detailed -logfile=/usr/etc/tools/pendaho/kettle/logs/kettle.log

 

  2.新建分割日志任务;


   #vim kettle_log.sh
 1 #!/bin/bash
 2 #function:kitchen.sh日志分割,最多保留? 4  
 5 dir=/usr/etc/tools/pendaho/kettle/logs/;
 6 file=kettle.log;
 7 #DATE=`date +"%Y%m%d %H%M%S"`;
 8 #date_file=$file-`date +"%Y%m%d-%H%M%S"`; #kettle.log-20190723
 9 date_file=$file-`date -d "1 minutes ago" +%Y%m%d-%H:%M:%S`; #实际上是1分钟前的所以增加1m ago;可以在命令行调试date -d;
10 #echo $date_file
11 #归档日志-将$file修改为$date_file,而后创建$file
12 cd $dir && mv -f $file $date_file && touch $file;
13  
14 #删除2天前的归档日志
15 #find $dir -mtime +3 -name "$file-*.log" -exec rm -rf {} \;
16 #find $dir -mtime +3 -name "kettle.log*" -exec rm -rf {} \;
17 find $dir -cmin +3 -name "kettle.log*" -exec rm -rf {} \;

*上述第9行的调试效果:

 

 

  3.通过crontab配置任务执行;

1 crontab -e
2 */1 9-23 * * 1-5 sh /usr/etc/tools/pendaho/kettle/kettle.sh
3 */1 9-23 * * * sh /usr/etc/tools/pendaho/kettle/kettle_log.sh

 

  4.效果;

 

posted @ 2019-07-23 18:51  stuka  阅读(10138)  评论(0编辑  收藏  举报