【发布时间】:2016-04-12 01:28:39
【问题描述】:
现在,我发现我的lzo 文件无法拆分,所以我的搜索速度很慢。所以我应该如何加快搜索速度。
哪些文件是可拆分的。
我的数据源是flume,数据存储在hdfs。
【问题讨论】:
现在,我发现我的lzo 文件无法拆分,所以我的搜索速度很慢。所以我应该如何加快搜索速度。
哪些文件是可拆分的。
我的数据源是flume,数据存储在hdfs。
【问题讨论】:
我建议您将数据写入 ORC 或 Parquet。任何一种格式都会比 lzo 快得多。
【讨论】: