【发布时间】:2016-11-01 01:13:45
【问题描述】:
在 Python 3 Web 应用程序中,我需要使用命令行实用程序来处理图像,将其输出写入命名管道 (fifo),然后将该输出(管道的内容)解析为PIL/枕头图像。这是基本流程(和工作代码这么长,没有错误!):
from os import mkfifo
from os import unlink
from PIL import Image
from subprocess import DEVNULL
from subprocess import PIPE
from subprocess import Popen
fifo_path = '/tmp/myfifo.bmp'
cmd = '/usr/bin/convert -resize 100 /path/to/some.tif ' + fifo_path
# make a named pipe
mkfifo(fifo_path)
# execute
proc = Popen(cmd, stdout=DEVNULL, stderr=PIPE, shell=True)
# parse the image
pillow_image = Image.open(fifo_path)
# finish the process:
proc_exit = proc.wait()
# remove the pipe:
unlink(fifo_path)
# just for proof:
pillow_image.show()
(在上面的示例中,我已经用 ImageMagick 替换了我实际必须使用的实用程序,只是因为您不太可能拥有它——它根本不会影响问题。)
这在大多数情况下都很好用,并且我可以处理大多数异常(为清楚起见,上面省略了),但是有一种情况我无法弄清楚如何处理,如果出现问题该怎么办外壳,导致空管道,例如如果图像不存在或由于某种原因损坏,例如:
fifo_path = '/tmp/myfifo.bmp'
cmd = '/usr/bin/convert -resize 100 /path/to/some/bad_or_missing.tif ' + fifo_path
# make a named pipe
mkfifo(fifo_path)
# execute
proc = Popen(cmd, stdout=DEVNULL, stderr=PIPE, shell=True)
# parse the image
pillow_image = Image.open(fifo_path) # STUCK
...
应用程序在这里挂起,因为我无法访问proc_exit = proc.wait(),所以我无法设置timeout(例如proc_exit = proc.wait(timeout=2)),这是我通常会做的。
我尝试将整个业务封装在上下文管理器中,类似于 this answer,但该方法不是线程安全的,这是一个问题,我找不到可以让我访问的线程或多处理解决方案当我加入线程或进程时到 PIL/Pillow Image 实例(不是我的强项,而是这样的东西):
from multiprocessing import Process
from os import mkfifo
from os import unlink
from PIL import Image
from subprocess import DEVNULL
from subprocess import PIPE
from subprocess import Popen
def do_it(cmd, fifo_path):
mkfifo(fifo_path)
# I hear you like subprocesses with your subprocesses...
sub_proc = Popen(cmd, stdout=DEVNULL, stderr=PIPE, shell=True)
pillow_image = Image.open(fifo_path)
proc_exit = sub_proc.wait()
unlink(fifo_path)
fifo_path = '/tmp/myfifo.bmp'
cmd = '/usr/bin/convert -resize 100 /path/to/some/bad_or_missing.tif ' + fifo_path
proc = Process(target=do_it, args=(cmd, fifo_path))
proc.daemon = True
proc.start()
proc.join(timeout=3) # I can set a timeout here
# Seems heavy anyway, and how do I get pillow_image back for further work?
pillow_image.show()
希望这些能说明我的问题和我的尝试。提前致谢。
【问题讨论】:
-
命令出错时不会退出吗?这将关闭管道,你会得到一个空响应,它不会阻塞。
-
直到
proc.wait(),直到读取fifo中的数据后我才能调用它。 -
我刚刚注意到您使用的是命名管道,而不是让命令写入
stdout。因此,如果输入文件出错,它永远不会打开输出管道。你能改变它,让它写入标准输出吗? -
如果不能更改命令,可以使用
/dev/stdout代替命名管道。 -
也许可以用后缀符号链接到
/dev/stdout。
标签: python python-3.x subprocess