python中的共享内存并行处理

Question

我有一个字符串列表，我想将这些列表元素存储到适当的存储桶中。

def bucketElements(i):
    global buckA, buckB, buckC
    if i.startswith('A'):
        buckA.add(i)
    elif i.startswith('B'):
        buckB.add(i)
    elif i.startswith('C'):
        buckC.add(i)

现在我想为列表中的每个元素并行调用此方法。像这样的，

buckA,buckB, buckC = set(), set(), set()
pool = multiprocessing.Pool(processes=10)
pool.map(bucketElements, buckList)

由于我在函数内部更新全局变量，因此无法使用多处理。无论如何我可以改进我的处理吗？目前我是这样称呼的，

buckA,buckB, buckC = set(), set(), set()
for i in buckList:
    bucketElements(i)

Answer 1

您有 3 个选项：

• Queue()
• Manager.Value()
• Manager.list()

Python » 文档：multiprocessing.html#managers