【问题标题】:write dask dataframe to one file将 dask 数据帧写入一个文件
【发布时间】:2019-01-16 23:33:41
【问题描述】:

我可以像这样将大量的 dask 数据帧写入磁盘:

raw_data.to_csv(r'C:\Bla\SubFolder\*.csv')

这会在子文件夹中生成原始(经过处理的)数据集的分块数据:

C:\Bla\SubFolder\

只是想知道,我可以强制 dask 将数据写入一个文件吗?

【问题讨论】:

标签: python python-3.x pandas csv dask


【解决方案1】:

要将所有内容保存到单个文件中,需要将single_file=True 传递为

df.to_csv(r'C:\Bla\SubFolder\*.csv', single_file = True)

【讨论】:

    猜你喜欢
    • 2018-03-01
    • 1970-01-01
    • 2021-03-26
    • 2018-07-25
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2023-03-22
    • 2019-06-26
    相关资源
    最近更新 更多