具有不同网络上的工作人员的 Dask 集群

Question

我想使用连接到不同网络的两台（或多台）笔记本电脑创建一个集群。我正在尝试dask-scheduler 和dask-worker 但它只有在两台机器连接到同一个网络时才有效。

我该怎么做？ 谢谢。

Answer 1

您不需要做任何特别的事情，除了机器需要就如何相互寻址达成一致：它们将具有唯一的 DNS 名称（不太可能）或固定的 IP 地址。您需要确保 dask 的端口（您可以在命令行或配置中选择）通过网络之间的任何网桥/路由打开。我不确定您如何使用临时 IP 来实现它（这对于使用 wifi 的笔记本电脑来说更为典型）。

请注意，客户端和工作人员需要能够发起与调度程序的联系，工作人员需要能够发起他们之间的联系。最好让客户能够直接联系工人。