【问题标题】:Dask rolling function by group syntax按组语法的 Dask 滚动功能
【发布时间】:2017-02-11 04:09:37
【问题描述】:

我在为 dask 数据帧按组计算滚动函数的语法上苦苦挣扎了一段时间。该文档非常好,但在这种情况下没有示例。

我拥有的工作版本如下,来自一个 csv,其中包含一个带有用户 ID 和 x、y 和 z 列的文本字段:

ddf = read_csv('./*.csv')
ddf.groupby(ddf.User).x.apply(lambda x: x.rolling(5).mean(), meta=('x', 'f8')).compute()

这是在 dask DataFrames 中按组应用的滚动函数的推荐语法,还是有推荐的替代方法?

【问题讨论】:

    标签: python dask


    【解决方案1】:

    为了在结果中保留组:

    ddf.groupby(by=User).apply(lambda df_g: df_g['x'].rolling(5).mean(), meta=('x', 'f8')).compute()
    

    【讨论】:

    • 这对我不起作用。给我UnpicklingError: invalid load key, '�'.
    • @pissall 尝试加载 csv 文件的一小部分。我怀疑这与您的 csv 中的不良数据有关。为此,您可以使用 read_csv 函数上的 nrows 参数。你能发布更多信息吗?
    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 2022-11-01
    • 1970-01-01
    • 1970-01-01
    • 2011-02-24
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多