如果crontab设定任务每分钟执行一次,但执行的任务需要花费5分钟,这时系统会再执行导致两个相同的任务在执行。发生这种情况下可能会出现一些并发问题,严重时会导致出现脏数据性能瓶颈等恶性循环。

打开网易新闻 查看精彩图片

如果crontab设定任务每分钟执行一次,但执行的任务需要花费5分钟,这时系统会再执行导致两个相同的任务在执行。
发生这种情况下可能会出现一些并发问题,严重时会导致出现脏数据性能瓶颈等恶性循环。
为了防止这种情况,可以使用flock建立排它锁。

例:

# /tmp/sleeptest.sh
#!/bin/bash
# Sleep
# PATH=/bin:/sbin:/usr/bin:/usr/sbin:/usr/local/bin:/usr/local/sbin:~/bin
# export PATH
echo ""
echo "*****************************************"
echo "start time `date '+%Y-%m-%d %H:%M:%S'` "
sleep 300s
echo "finish time `date '+%Y-%m-%d %H:%M:%S'` "
echo "*****************************************"

计划任务

# crontab -e
*/1 * * * * /tmp/sleeptest.sh >> /tmp/sleeptest.log

查看进程

#ps aux | grep sleeptest.sh | wc -l
2

(每分钟都会增加一个,说明shell重复执行中)

flock

使用flock建立排他锁,如果对进程加了排他锁其他进程无法加锁,
可以选择等待超时或马上返回。

flock [-sxun][-w #]
flock [-sxon][-w #] file [-c] command
-s, --shared: 获得一个共享锁
-x, --exclusive: 获得一个独占锁/排他锁
-u, --unlock: 移除一个锁,通常是不需要的,脚本执行完会自动丢弃锁
-n, --nonblock: 如果没有立即获得锁,直接失败而不是等待
-w, --timeout: 如果没有立即获得锁,等待指定时间
-o, --close: 在运行命令前关闭文件的描述符号。用于如果命令产生子进程时会不受锁的管控
-c, --command: 在shell中运行一个单独的命令
-h, --help 显示帮助
-V, --version: 显示版本
-w 等待时间,秒

添加锁

*/1 * * * * flock -xn /tmp/sleeptest.lock -c /tmp/sleeptest.sh >> /tmp/sleeptest.log
## -x 独占锁 -n 直接失败 如发现被锁如就失败不等待,除非解锁。
*/1 * * * * flock -x -w 30 /tmp/sleeptest.lock -c /tmp/sleeptest.sh >> /tmp/sleeptest.log
## 如发现被锁等30秒,解锁成功的话就执行。

本文地址:https://www.linuxprobe.com/centos-flock-for.html