linux使用flock文件锁解决crontab冲突问题
linux的crontab命令。能够定时运行操作。最小周期是每分钟运行一次。关于crontab实现每秒运行可參考我之前的文章《linux crontab 实现每秒运行》
如今有个问题,假设设定了任务每分钟运行一次,但有可能一分钟内任务并没有运行完毕,这时系统会再运行任务。导致两个同样的任务在运行。
比如:
<? // test.php for($i=0; $i<300; $i++){ echo date('Y-m-d H:i:s')."\r\n"; sleep(1); } ?>循环300次,每循环一次睡眠1秒。运行完毕须要300秒即5分钟。
设置crontab 为每分钟运行
* * * * * php /home/fdipzone/php/test.php >> /home/fdipzone/php/test.log2分钟后,使用 ps aux|grep test.php 查看。能够看到有两个test.php进程在运行。
3分钟后,看到有3个test.php进程在运行。
fdipzone@ubuntu:/tmp$ ps aux|grep test.php fdipzone 2995 0.0 0.0 4220 588 ?Ss 00:28 0:00 /bin/sh -c php /home/fdipzone/php/test.php >> /home/fdipzone/php/test.log fdipzone 2996 0.0 0.8 108328 8564 ?
S 00:28 0:00 php /home/fdipzone/php/test.php fdipzone 3033 0.0 0.0 4220 584 ? Ss 00:29 0:00 /bin/sh -c php /home/fdipzone/php/test.php >> /home/fdipzone/php/test.log fdipzone 3034 0.1 0.8 108328 8564 ? S 00:29 0:00 php /home/fdipzone/php/test.php fdipzone 3047 0.0 0.0 4220 588 ? Ss 00:30 0:00 /bin/sh -c php /home/fdipzone/php/test.php >> /home/fdipzone/php/test.log fdipzone 3048 1.3 0.8 108328 8560 ? S 00:30 0:00 php /home/fdipzone/php/test.php fdipzone 3051 0.0 0.1 13148 1068 pts/0 S+ 00:30 0:00 grep --color=auto test.php
我们是希望运行完上一任务,再运行下一任务,假设上一任务未运行完毕,则这次的任务不运行,直到下一周期再推断,假设上一任务运行完毕,则能够运行下一任务。
改进方法
我们能够使用一个锁文件,来记录任务是否运行中。
首先推断/tmp/mytest.lock是否存在,假设不存在,则创建,然后运行任务,任务运行完后删除锁文件。
假设锁文件已经存在。则退出这次的任务。
<?这种确能够保证任务运行其间不会有新任务运行,但这样须要在任务文件里写代码做推断。不方便。php $lockfile = '/tmp/mytest.lock'; if(file_exists($lockfile)){ exit(); }else{ file_put_contents($lockfile, 1, true); } for($i=0; $i<300; $i++){ echo date('Y-m-d H:i:s')."\r\n"; sleep(1); } unlink($lockfile); ?
>
能不能把任务锁定的推断放在任务以外呢?
使用linux flock 文件锁实现任务锁定。解决冲突
格式:
flock [-sxun][-w #] fd#
flock [-sxon][-w #] file [-c] command
选项
-s, --shared: 获得一个共享锁 -x, --exclusive: 获得一个独占锁 -u, --unlock: 移除一个锁,一般是不须要的。脚本执行完会自己主动丢弃锁 -n, --nonblock: 假设没有马上获得锁。直接失败而不是等待 -w, --timeout: 假设没有马上获得锁。等待指定时间 -o, --close: 在执行命令前关闭文件的描写叙述符号。用于假设命令产生子进程时会不受锁的管控 -c, --command: 在shell中执行一个单独的命令 -h, --help 显示帮助 -V, --version: 显示版本号继续用回第一个test.php,文件锁使用独占锁。假设锁定则失败不等待。
參数为-xn
* * * * * flock -xn /tmp/mytest.lock -c 'php /home/fdipzone/php/test.php >> /home/fdipzone/php/test.log'这样当任务未运行完毕,下一任务推断到/tmp/mytest.lock被锁定,则结束当前的任务,下一周期再推断。