ChatGPT解决这个技术问题 Extra ChatGPT

仅在尚未运行时运行 cron 作业

我正在尝试将 cron 作业设置为我创建的守护程序的一种看门狗。如果守护程序出错并失败,我希望 cron 作业定期重新启动...正在寻找...

我的守护进程是从一个 shell 脚本开始的,所以我真的只是在寻找一种方法来运行一个 cron 作业,前提是该作业的前一次运行尚未运行。

I found this post,它确实为我尝试使用锁定文件做的事情提供了一个解决方案,但我不确定是否有更好的方法来做到这一点......


C
Community

使用 flock。这是新的。它更好。

现在您不必自己编写代码。在此处查看更多原因:https://serverfault.com/a/82863

/usr/bin/flock -n /tmp/my.lockfile /usr/local/bin/my_script

我还在这里创建了一个不错的 cron 模板要点:gist.github.com/jesslilly/315132a59f749c11b7c6
setlocks6-setlockchpstrunlock 的非阻塞模式是替代方案,不仅在 Linux 上可用。 unix.stackexchange.com/a/475580/5132
j
jjclarkson

我为我编写的打印后台处理程序执行此操作,它只是一个 shell 脚本:

#!/bin/sh
if ps -ef | grep -v grep | grep doctype.php ; then
        exit 0
else
        /home/user/bin/doctype.php >> /home/user/bin/spooler.log &
        #mailing program
        /home/user/bin/simplemail.php "Print spooler was not running...  Restarted." 
        exit 0
fi

它每两分钟运行一次,非常有效。如果由于某种原因进程没有运行,我会通过电子邮件向我发送特殊信息。


但是,这不是一个非常安全的解决方案,如果有其他进程与您在 grep 中所做的搜索相匹配怎么办? rsanden 的回答使用 pidfile 防止了这种问题。
这个轮子已经在别处发明了 :) 例如,serverfault.com/a/82863/108394
您可以使用 grep [d]octype.php 代替 grep -v grep | grep doctype.php
请注意,如果是 cron 运行脚本,则不需要 &
r
rsanden

正如其他人所说,编写和检查 PID 文件是一个很好的解决方案。这是我的 bash 实现:

#!/bin/bash

mkdir -p "$HOME/tmp"
PIDFILE="$HOME/tmp/myprogram.pid"

if [ -e "${PIDFILE}" ] && (ps -u $(whoami) -opid= |
                           grep -P "^\s*$(cat ${PIDFILE})$" &> /dev/null); then
  echo "Already running."
  exit 99
fi

/path/to/myprogram > $HOME/tmp/myprogram.log &

echo $! > "${PIDFILE}"
chmod 644 "${PIDFILE}"

+1 使用 pidfile 可能比 grepping 运行同名程序更安全。
/path/to/myprogram & > $HOME/tmp/myprogram.log & ??????你的意思是 /path/to/myprogram >> $HOME/tmp/myprogram.log &
脚本完成后不应该删除文件吗?还是我错过了一些非常明显的东西?
@matteo:是的,你是对的。几年前我在笔记中修复了这个问题,但忘了在这里更新。更糟糕的是,我在您的评论中也错过了它,只注意到“>”与“>>”。对于那个很抱歉。
@Hamzahfrq:它是这样工作的:脚本首先检查PID文件是否存在(“[ -e "${PIDFILE}" ]”。如果不存在,那么它将在后台启动程序,将其PID写入文件(“{ 2}"),然后退出。如果 PID 文件确实存在,则脚本将检查您自己的进程(“ps -u $(whoami) -opid=”)并查看您是否正在运行具有相同 PID 的进程(“grep -P "^\s*$(cat ${PIDFILE})$"”) . 如果不是,那么它将像以前一样启动程序,用新的 PID 覆盖 PID 文件,然后退出。我认为没有理由修改脚本;是吗?
B
Bedi Egilmez

令人惊讶的是,没有人提到 run-one。我已经解决了我的问题。

 apt-get install run-one

然后在您的 crontab 脚本之前添加 run-one

*/20 * * * * * run-one python /script/to/run/awesome.py

查看 this askubuntu SE 答案。您也可以在那里找到详细信息的链接。


值得一提的是,这个工具在 Ubuntu 20 中是开箱即用的(也可能是之前的版本)
这是一个巨大的帮助
可从此处获得 Debian、BSD 和可能的其他 *nix 的可移植重写github.com/Freaky/run-one
E
Earlz

不要试图通过 cron 来做。无论如何都要让 cron 运行一个脚本,然后让脚本决定程序是否正在运行并在必要时启动它(注意,您可以使用 Ruby 或 Python 或您最喜欢的脚本语言来执行此操作)


经典的方法是读取服务启动时创建的 PID 文件,检查具有该 PID 的进程是否仍在运行,如果没有则重新启动。
q
quezacoatl

您也可以直接在 crontab 中将其作为单行执行:

* * * * * [ `ps -ef|grep -v grep|grep <command>` -eq 0 ] && <command>

不是很安全,如果有其他命令匹配 grep 的搜索怎么办?
这也可以写成 * * * * * [ ps -ef|grep [c]ommand -eq 0 ] && <命令>将命令的第一个字母括在括号中会将其从 grep 结果中排除。
我必须使用以下语法:[ "$(ps -ef|grep [c]ommand|wc -l)" -eq 0 ] && <command>
这太可怕了。 [ $(grep something | wc -l) -eq 0 ] 是写 ! grep -q something 的一种非常迂回的方式。所以你只想要ps -ef | grep '[c]ommand' || command
(另外,顺便说一句,如果您真的想实际计算匹配行的数量,那就是 grep -c。)
t
talsibony

当我运行 php 脚本时,我这样做的方式是:

crontab:

* * * * * php /path/to/php/script.php &

php代码:

<?php
if (shell_exec('ps aux | grep ' . __FILE__ . ' | wc  -l') > 1) {
    exit('already running...');
}
// do stuff

此命令正在系统进程列表中搜索当前 php 文件名,如果存在,则行计数器 (wc -l) 将大于 1,因为搜索命令本身包含文件名

所以如果你运行 php crons 将上面的代码添加到你的 php 代码的开头,它只会运行一次。


这就是我所需要的,因为所有其他解决方案都需要在客户端服务器上安装一些东西,而我无权这样做。
B
Byron Whitlock

作为 Earlz 回答的后续行动,您需要一个包装脚本,该脚本在启动时创建一个 $PID.running 文件,并在结束时删除。包装脚本调用您希望运行的脚本。包装器是必要的,以防目标脚本失败或出错,pid 文件被删除..


哦很酷...我从没想过使用包装器...我想不出使用锁定文件的方法,因为我不能保证如果守护程序出错,文件会被删除... A wrapper 可以完美地工作,我将试一试 jjclarkson 的解决方案,但如果这不起作用,我会这样做......
A
Aaron C. de Bruyn

使用 lockrun,您无需为您的 cron 作业编写包装脚本。 http://www.unixwiz.net/tools/lockrun.html


e
ekerner
# one instance only (works unless your cmd has 'grep' in it)
ALREADY_RUNNING_EXIT_STATUS=0
bn=`basename $0`
proc=`ps -ef | grep -v grep | grep "$bn" | grep -v " $$ "`
[ $? -eq 0 ] && {
    pid=`echo $proc | awk '{print $2}'`
    echo "$bn already running with pid $pid"
    exit $ALREADY_RUNNING_EXIT_STATUS
}

更新 .. 使用羊群的更好方法:

/usr/bin/flock -n /tmp/your-app.lock /path/your-app args 

Z
Zitrax

我建议使用现有的工具,例如 monit,它会监控和自动重启进程。有更多信息可用here。它应该在大多数发行版中都很容易获得。


除了这个答案之外,每个答案都回答了表面问题“我的 cron 作业如何确保它只运行一个实例?”当真正的问题是“如何在重新启动时保持我的进程运行?”时,正确的答案确实是不使用 cron,而是使用像 monit 这样的进程主管。其他选项包括 runits6,或者,如果您的发行版已经使用 systemd,则只需为需要保持活动状态的进程创建一个 systemd 服务。
M
Mikhail M.

This one 从来没有让我失望过:

一个.sh:

LFILE=/tmp/one-`echo "$@" | md5sum | cut -d\  -f1`.pid
if [ -e ${LFILE} ] && kill -0 `cat ${LFILE}`; then
   exit
fi

trap "rm -f ${LFILE}; exit" INT TERM EXIT
echo $$ > ${LFILE}

$@

rm -f ${LFILE}

定时任务:

* * * * * /path/to/one.sh <command>

C
Community

我建议以下作为对 rsanden's answer 的改进(我会作为评论发布,但没有足够的声誉......):

#!/usr/bin/env bash

PIDFILE="$HOME/tmp/myprogram.pid"

if [ -e "${PIDFILE}" ] && (ps -p $(cat ${PIDFILE}) > /dev/null); then
  echo "Already running."
  exit 99
fi

/path/to/myprogram

这避免了可能的错误匹配(以及 grepping 的开销),并且它抑制了输出并且仅依赖于 ps 的退出状态。


您的 ps 命令将匹配系统上其他用户的 PID,而不仅仅是您自己的。向 ps 命令添加“-u”会更改退出状态的工作方式。
l
lingeshram

简单的自定义php就足够实现了。无需与 shell 脚本混淆。

假设你想运行 php /home/mypath/example.php 如果没有运行

然后使用下面的自定义 php 脚本来做同样的工作。

创建以下 /home/mypath/forever.php

<?php
    $cmd = $argv[1];
    $grep = "ps -ef | grep '".$cmd."'";
    exec($grep,$out);
    if(count($out)<5){
        $cmd .= ' > /dev/null 2>/dev/null &';
        exec($cmd,$out);
        print_r($out);
    }
?>

然后在你的 cron 添加以下内容

* * * * * php /home/mypath/forever.php 'php /home/mypath/example.php'

E
Erlang Parasu

文档:https://www.timkay.com/solo/

solo 是一个非常简单的脚本(10 行),它可以防止程序一次运行多个副本。使用 cron 确保在前一个作业完成之前不会运行作业很有用。

例子

* * * * * solo -port=3801 ./job.pl blah blah

R
Richard Thomas

如果您打算走那条路线,请考虑使用 pgrep (如果可用)而不是 ps 通过 grep 管道。虽然,就个人而言,我已经从表单脚本中获得了很多里程

while(1){
  call script_that_must_run
  sleep 5
}

尽管这可能会失败,但 cron 作业通常是处理重要内容的最佳方式。只是另一种选择。


这只会一遍又一遍地启动守护进程,并不能解决上述问题。