使用子进程和 Boost 处理多个文件

Question

我是进程间通信的新手，正在寻找有关实现以下目标的最佳方法的输入和指导：我有一个将图像从一种格式转换为另一种格式的功能，我想要 使用多个进程进行批量图像转换。

• 我有 1000 张图像要从一种格式转换为另一种格式
• 我创建了 6 个子进程，并希望将图像文件名发送给它们进行处理：一个子一个图像要转换。

我应该简单地创建 6 个消息队列并向每个进程发送一个还是更好 创建一个存储图像名称向量的消息队列并将该向量发送到 6 个子进程？

如何将一个子进程的结果传回给父进程？以及如何在完成 1000 个文件之前继续向流程发送工作？

我正在使用 C++、Windows 和学习 Boost。

谢谢

杰夫

Answer 1

您需要多个进程还是可以使用具有多个线程的单个进程？这是一个多线程的解决方案（检查https://computing.llnl.gov/tutorials/pthreads/）：

1. 创建一个具有六个（或更多）工作线程的工作线程池。
2. 启动线程。他们应该在互斥体上停止，等待条件。这 条件是：输入队列不为空。
3. 将数据（例如图像句柄、文件名）加载到主线程上的输入队列 （同步其访问）并通知工作线程。
4. 每个工作线程都应该访问队列并删除最后一个元素。你需要 同步访问队列。
5. 当线程完成图像处理后，它应该存储处理后的数据（例如 转换后的图像句柄，文件名）在输出队列上（同样访问也应该同步）。
6. 当输入队列为空且没有更多数据要添加时，作业完成。输出队列 具有所有已处理的图像数据。