如何使用 gnu_parallel 运行多个可执行和/或 bash 脚本？

Question

我最近一直在尝试以一种比打开多个终端实例并分别在脚本中执行更方便的方式并行运行我的脚本。

过去几天我一直在尝试学习如何使用 gnu_parallel，但我仍然有点无能为力，希望有人能提供一个直接的例子。

假设我有一个名为 blah.exe 的 g++ 编译代码和一个名为 blah.sh 的 bash 脚本，它们可以完美地单独运行，但我想在不同的目录中执行它们。

我一直在阅读 https://www.gnu.org/software/parallel/man.html#EXAMPLE:-Working-as-xargs--n1.-Argument-appending

和

https://www.biostars.org/p/182136/

但我对语法并不完全清楚

要连续运行这些，我会这样做：

for i in 1 2 3 4
mv ./blah.exe directory$i
cd directory$i
./blah.exe all
cd ..
end

类似

for i in 1 2 3 4
mv ./blah.sh directory$i
cd directory$i
source ./blah.sh all
cd ..
end

我试图了解如何在一个命令中使用并行将此负载拆分为 4 个逻辑线程。

有人可以为此提供一个例子吗？

感谢您的宝贵时间。

Answer 1

类似：

parallel --dry-run 'cd directory{}; ../blah.exe all; source ../blah.sh all' ::: {1..4}

无需复制/移动可执行文件，只需运行同一个即可。

之后不需要cd ..，因为每次都是一个新进程。

注意这不是多线程，而是多处理。

---

如果你想处理不连续的目录号码，你可以使用：

parallel ... ::: {1..4} 6 7 {11..14}

如果要处理所有目录，可以使用：

printf "%s\0" */ | parallel -0 'cd {}; pwd' 

如果你想处理所有以FRED开头的目录，你可以使用：

printf "%s\0" FRED*/ | parallel -0 'cd {}; pwd'