【问题标题】:dask - how to set a local distributed scheduler as the default scheduler for dask.dataframe?dask - 如何将本地分布式调度程序设置为 dask.dataframe 的默认调度程序?
【发布时间】:2020-03-13 02:39:55
【问题描述】:

我试图让 dask.dataframe 默认使用本地分布式调度程序,但我从阅读 Dask 文档中不清楚如何做到这一点。像下面这样就足够了吗?

from dask import distributed
from dask import dataframe as dd
client = distributed.Client(processes=True)  # use multi processing
dask.config.set(scheduler=client)

dd.merge(df1, df2, on='some_col')

【问题讨论】:

    标签: dask dask-distributed


    【解决方案1】:

    是的:如果您创建任何类型的分布式Client,它将成为进一步 Dask 计算的默认调度程序。

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 2017-03-30
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2020-09-05
      • 1970-01-01
      相关资源
      最近更新 更多