linux使用flock文件锁解决crontab冲突问题

linux的crontab命令。能够定时运行操作。最小周期是每分钟运行一次。关于crontab实现每秒运行可參考我之前的文章《linux crontab 实现每秒运行》

如今有个问题,假设设定了任务每分钟运行一次,但有可能一分钟内任务并没有运行完毕,这时系统会再运行任务。导致两个同样的任务在运行。

比如:

<?
// test.php
for($i=0; $i<300; $i++){
    echo date('Y-m-d H:i:s')."\r\n";
    sleep(1);
}
?>
循环300次,每循环一次睡眠1秒。运行完毕须要300秒即5分钟。

设置crontab 为每分钟运行

* * * * * php /home/fdipzone/php/test.php >> /home/fdipzone/php/test.log
2分钟后,使用 ps aux|grep test.php 查看。能够看到有两个test.php进程在运行。

3分钟后,看到有3个test.php进程在运行。

fdipzone@ubuntu:/tmp$ ps aux|grep test.php
fdipzone  2995  0.0  0.0   4220   588 ?

Ss 00:28 0:00 /bin/sh -c php /home/fdipzone/php/test.php >> /home/fdipzone/php/test.log fdipzone 2996 0.0 0.8 108328 8564 ?

S 00:28 0:00 php /home/fdipzone/php/test.php fdipzone 3033 0.0 0.0 4220 584 ? Ss 00:29 0:00 /bin/sh -c php /home/fdipzone/php/test.php >> /home/fdipzone/php/test.log fdipzone 3034 0.1 0.8 108328 8564 ? S 00:29 0:00 php /home/fdipzone/php/test.php fdipzone 3047 0.0 0.0 4220 588 ? Ss 00:30 0:00 /bin/sh -c php /home/fdipzone/php/test.php >> /home/fdipzone/php/test.log fdipzone 3048 1.3 0.8 108328 8560 ? S 00:30 0:00 php /home/fdipzone/php/test.php fdipzone 3051 0.0 0.1 13148 1068 pts/0 S+ 00:30 0:00 grep --color=auto test.php

我们是希望运行完上一任务,再运行下一任务,假设上一任务未运行完毕,则这次的任务不运行,直到下一周期再推断,假设上一任务运行完毕,则能够运行下一任务。



改进方法

我们能够使用一个锁文件,来记录任务是否运行中。

首先推断/tmp/mytest.lock是否存在,假设不存在,则创建,然后运行任务,任务运行完后删除锁文件。

假设锁文件已经存在。则退出这次的任务。

<?

php $lockfile = '/tmp/mytest.lock'; if(file_exists($lockfile)){ exit(); }else{ file_put_contents($lockfile, 1, true); } for($i=0; $i<300; $i++){ echo date('Y-m-d H:i:s')."\r\n"; sleep(1); } unlink($lockfile); ?

>

这种确能够保证任务运行其间不会有新任务运行,但这样须要在任务文件里写代码做推断。不方便。

能不能把任务锁定的推断放在任务以外呢?


使用linux flock 文件锁实现任务锁定。解决冲突

格式:

flock [-sxun][-w #] fd#

flock [-sxon][-w #] file [-c] command

选项

-s, --shared:    获得一个共享锁
-x, --exclusive: 获得一个独占锁
-u, --unlock:    移除一个锁,一般是不须要的。脚本执行完会自己主动丢弃锁
-n, --nonblock:  假设没有马上获得锁。直接失败而不是等待
-w, --timeout:   假设没有马上获得锁。等待指定时间
-o, --close:     在执行命令前关闭文件的描写叙述符号。用于假设命令产生子进程时会不受锁的管控
-c, --command:   在shell中执行一个单独的命令
-h, --help       显示帮助
-V, --version:   显示版本号
继续用回第一个test.php,文件锁使用独占锁。假设锁定则失败不等待。

參数为-xn

* * * * * flock -xn /tmp/mytest.lock -c 'php /home/fdipzone/php/test.php >> /home/fdipzone/php/test.log'
这样当任务未运行完毕,下一任务推断到/tmp/mytest.lock被锁定,则结束当前的任务,下一周期再推断。


posted @ 2016-01-12 20:02  blfshiye  阅读(372)  评论(0编辑  收藏  举报