用Bash脚本并行执行PHP进程？

Question

我想从一个bash脚本中启动大约10个php进程。当其中一个完成时，我希望bash脚本启动另一个php进程，并一直保持大约10个php进程运行，无限循环下去。

最简单的方法是什么？

每次启动的php文件都将是相同的，但php进程将知道从数据库中提取新值，以便每次处理新数据。我需要启动的文件和它的所有类已经用php编写好了。

- T. Brian Jones

Answer 1

看起来适合使用superivisord。以下配置将确保始终运行10个进程，并处理日志轮换，这也非常方便。所有输出，包括stderr，都将写入/var/log/worker.log。使用“autorestart=true”，当子进程退出时，supervisord将立即替换它。

[program:worker]
command=php /path/to/worker.php
process_name=%(program_name)s_%(process_num)d
stdout_logfile=/var/log/%(program_name)s.log
redirect_stderr=true
stdout_capture_maxbytes=512MB
stdout_logfile_backups=3
numprocs=10
numprocs_start=0
autostart=true
autorestart=true

一旦您已经配置好了supervisor的配置文件（通常是在/etc/supervisord/conf.d中），您可以使用supervisorctl作为方便的方式来启动和停止进程组。

$ supervisorctl start worker
...
$ supervisorctl stop worker
...
$ supervisorctl status
worker:worker_0              RUNNING    pid 8985, uptime 0:09:24
worker:worker_1              RUNNING    pid 10157, uptime 0:08:52
...
worker:worker_9              RUNNING    pid 12459, uptime 0:08:31

- Kyle Ambroff

---

这个非常好用，并且只花了几个小时就和其他一些功能一起完成了。谢谢。 - T. Brian Jones

Answer 2

你可以使用GNU Parallel，将需要处理的图像列表通过管道传递给parallel，具体使用方法请参考这里。

- a3nm

Answer 3

你可以像这样使用。使用一个文件启动10个（只运行一次），每个文件的底部在完成时都可以重新启动自己。

/** 
 * Asynchronously execute/include a PHP file. Does not record the output of the file anywhere.  
 *
 * @param string $filename      file to execute, relative to calling script (or root?)
 * @param string $options       (optional) arguments to pass to file via the command line
 */ 
function asyncInclude($filename, $options = '') {
    exec("/path/to/php -f {$filename} {$options} >> /dev/null &");
}

- philfreo

Answer 4

jcomeau@intrepid:/tmp$ cat test.sh
#!/bin/sh
set -m  # monitor mode
task="php-cgi /tmp/sleep.php"
function do_task {
 $task >/dev/null &
 echo -n spawned $! ' ' >&2
}
trap do_task SIGCHLD
for i in $(seq 1 10); do
 do_task
done
while true; do
 wait
done

jcomeau@intrepid:/tmp$ cat sleep.php
<?php sleep(3); ?>

- jcomeau_ictx