【发布时间】:2020-01-01 06:19:00
【问题描述】:
我计划将数据文件格式从镶木地板更改为羽毛。 Parquet 有压缩选项(lz4 等),我已经使用过它们。但我在羽毛或箭头文件中找不到它们。不支持压缩吗?
【问题讨论】:
标签: feather apache-arrow
我计划将数据文件格式从镶木地板更改为羽毛。 Parquet 有压缩选项(lz4 等),我已经使用过它们。但我在羽毛或箭头文件中找不到它们。不支持压缩吗?
【问题讨论】:
标签: feather apache-arrow
专为memory-resident-data设计的Arrow文件格式不支持lz4、snappy、gzip和zlib等压缩算法。 Arrow 目前唯一支持的压缩是字典压缩,这种方案通常在数据处理之前不需要解压缩。
【讨论】: