Python 3.5 全局变量不会追加

Question

我正在尝试使用可以在线程/进程完成任务时附加的全局列表。我的主线程可以从中读取，但不能通过函数附加它。基本上我提出请求以获取工作代理，然后尝试将它们保存到列表中，然后在最后打印列表。我已经尽可能地剪掉了。

goodProxyList = ["test"] 


def testProxy(x):
    global goodProxyList
    try:
        test = requests.get('http://someurl.com/', proxies=proxies, timeout=10)
        if test.status_code == 200:
            goodProxyList.append(x)
        else:
            print("Something went wrong! :/" + " From PID: " + str(pid))
    except:
        print("SOMETHING WENT VERY WRONG" + " From PID: " + str(pid))


if __name__ == '__main__':
    ##Setup Stuff happens
    p=Pool(2)
    p.map(testProxy, proxyList)
    for i in goodProxyList:
        print(i)

即使我将 goodProxyList.append(x) 更改为 goodProxyList.append("Anything")，最后两行仍然不会输出“test”。我做错了什么？

编辑：

我通过 brianpck 的帮助找到了答案。正如他所说，似乎进程的工作方式与线程不同。我更改为池线程现在可以完美运行。

#p=Pool(2)
#p.map(testProxy, proxyList)
with concurrent.futures.ThreadPoolExecutor() as executor:
    executor.map(testProxy, proxyList)

Answer 1

这里的问题是Pool，而不是global。

当在函数范围内附加到列表（可变对象）时，列表也会在全局范围内发生变化。 （事实上​​，你甚至不必使用global 关键字：如果函数在它自己的范围内没有找到变量，它会自动在全局范围内查找。）注意一个小“陷阱”在下面的代码，因为map 是一个类似生成器的对象：

x = []

def add_to_x(i):
    x.append(i)

if __name__ == '__main__':
    y = map(add_to_x, [1, 2])
    print(x) # still []
    list(y)
    print(x) # now [1, 2]

以下带有Pool 的简单示例不起作用：

from multiprocessing import Pool

x = []

def add_to_x(i):
    x.append(i)

if __name__ == '__main__':
    p = Pool(2)
    list(p.map(add_to_x, [1, 2]))
    print(x) # prints [] !

为什么？ Python multiprocessing global variable updates not returned to parent 的答案很有启发性：这里是相关部分：

当您使用multiprocessing 打开第二个进程时，会创建一个全新的 Python 实例，它具有自己的全局状态。该全局状态不共享，因此子进程对全局变量所做的更改对父进程是不可见的。

您可以通过多种方式潜在地处理这个问题。一种方法是将testProxy 更改为is_good_proxy，这将返回一个布尔值。然后，您可以在主循环中应用附加逻辑。