如何使用 gnu 并行编写批处理命令？

Question

我正在尝试使用名为 ocrmypdf 的包进行一些批处理。

这是一个可以处理1个pdf文件的命令

ocrmypdf input.pdf output.pdf

这是一个可以处理我们运行目录中所有pdf文件的命令。

parallel --tag -j 2 ocrmypdf '{}' 'output/{}' ::: *.pdf

现在，我实际上想对目录中的所有 pdf 文件运行此命令。这个多了一个参数。

ocrmypdf --sidecar txt/input.txt input.pdf out/output.pdf

我之前尝试过这样重写并行命令：

parallel --tag -j 2 ocrmypdf --sidecar txt/{}.txt {}.pdf out/{}.pdf ::: *.pdf

但我得到了错误：

ocrmypdf: error: the following arguments are required: output_pdf

有人可以帮我理解我做错了什么吗？谢谢！

Answer 1

试试：

parallel --tag -j 2 ocrmypdf --sidecar txt/{.}.txt {} out/{} ::: *.pdf

大括号后面的 .pdf（即“{}.pdf”）是无关的，将导致无法找到输入文件（“{}”默认情况下也会捕获扩展名），并且对于文本一，通过在括号内添加句点，自动删除扩展名，因此您最终将得到“....txt”而不是“....pdf.txt”文件（其中“... " = 与输入匹配的相同文件名）

如果上述方法不起作用，可能是由于文件名中包含空格，或者其他一些字符混淆了并行解析（如文件名中的引号字符、括号等），请尝试使用文件作为输入：

故障排除解决方案 - 创建一个文件作为 parallel 的输入

我相信这应该可行。为了避免引号引起的大惊小怪，我首先创建了一个包含所有 pdf 名称的文件（来自 cwd 的完整相对路径）：

[g]ls --color=none *.pdf | parallel -q printf '%s'\\n {} > ocrmypdf.list

或

[g]ls --color=none -N *.pdf > ocrmypdf.list

重要的是，.list 文件中的打印文件名中没有引入单引号——引号应该是“文字”，例如：

像这样：

Tritone Substitution sheet music.pdf

不是这样的：

'Tritone Substitution sheet music.pdf'

然后你可以运行并行 ocrmypdf 命令，如下所示：

parallel -j 2 ocrmypdf --sidecar txt/{.} {} out/{} :::: ocrmypdf.list

还要注意 4 :::: 与通常的三个，因为它是从文件中读取的。这将默认为每行并行运行一个完整的文件名参数，因此，不用担心输入文件的 pdf 文件名中是否有空格等。

Answer 2

这对我有用：

parallel --tag -j 2 ocrmypdf --sidecar txt/{.}.txt {} out/{} ::: *.pdf

如果它不适合你：

• 识别失败的文件
• 手动运行失败的文件以检查它是否有效
• 编辑您的问题以包含指向失败文件的链接

（在运行多个 tesseracts 时也要注意这个错误：https://github.com/tesseract-ocr/tesseract/issues/3109#issuecomment-703845274）