如何在bash中并行运行命令？

Question

之前已经问过这个问题并且有很多答案，但我的需求更具体：

• 我需要运行的进程都是长时间运行的进程，通常不会结束。
• 我不想只在背景上运行它们，因为我需要查看它们的输出。
• 如果任何进程退出，我希望其余进程也被自动终止。
• 如果我在用于运行它们的主命令上使用Ctrl + C或其他信号，我想杀死所有进程。

例如，使用& + wait不满足最后一点。 GNU并行看起来相当复杂，可能会这样做，但我找不到一个如何使用它的好例子。

Answer 1

在摆弄GNU parallel一段时间后，这似乎可以正常工作。

添加了我需要运行到Makefile的脚本，以便make consume ， make project和make run可用。

现在我像这样并行运行它们：

parallel --ungroup --halt now,success=1,fail=1 make ::: consume project run

使用--ungroup我可以看到输出和查杀似乎也按预期工作。 与我最初的帖子的唯一区别是，当其中一个程序结束时，其他程序没有被杀死。 但这并不重要。

Answer 2

我需要运行的进程都是长时间运行的进程，通常不会结束。

我使用你的操作系统的init系统制作系统服务。 设计用于管理长时间运行流程的系统可以管理长时间运行的流程。 为什么要花费你的精力重新发明一个好的init系统已经拥有的所有功能，如自动重启，日志管理和服务间依赖？

让我们假设您的init系统是systemd ，这是现代Red Hat和Debian发行版使用的。

我不想只在背景上运行它们，因为我需要查看它们的输出。

systemd自动捕获stdout和stderr并将它们保存在日志中。 systemctl status <service>和journalctl等命令提供了许多查看和搜索日志数据的方法。 您可以按严重性级别，按时间或许多其他元数据字段进行筛选。 您可以查看单个服务的输出或多个服务的组合输出。

如果任何进程退出，我希望其余进程也被自动终止。

systemd允许您使用BindsTo= ， Requires=或其他类似选项表达此信息。 有关详细信息，请参见systemd.unit手册页 。

如果我在用于运行它们的主命令上使用Ctrl + C或其他信号，我想杀死所有进程。

您可以使用systemctl stop <service> 。 它将停止指定的服务及其家属。

对于系统可以为您做的所有事情的抽样，请仔细阅读其手册：

• systemd.unit
• systemd.service

Answer 3

你可以使用xargs -P0

---

-P max-procs， - max-procs = max-procs一次运行max-procs进程; 默认值为1.如果max-procs为0，则xargs将一次运行尽可能多的进程。 将-n选项或-L选项与-P一起使用; 否则很可能只会有一名执行官。 当xargs运行时，您可以向其进程发送SIGUSR1信号以增加同时运行的命令数，或者发送SIGUSR2以减少数量。 您不能将其增加到实现定义的限制之上（使用--show-limits显示）。 你不能将它降低到1. xargs永远不会终止它的命令; 当被要求减少时，它只是等待多个现有命令在启动另一个命令之前终止。