【问题标题】:Presto:Which files are splittable?Presto:哪些文件可以拆分?
【发布时间】:2016-04-12 01:28:39
【问题描述】:

现在,我发现我的lzo 文件无法拆分,所以我的搜索速度很慢。所以我应该如何加快搜索速度。

哪些文件是可拆分的。

我的数据源是flume,数据存储在hdfs

【问题讨论】:

    标签: hive flume-ng presto


    【解决方案1】:

    我建议您将数据写入 ORC 或 Parquet。任何一种格式都会比 lzo 快得多。

    【讨论】:

    • flume可以直接在orc中写入数据??
    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2011-11-14
    • 1970-01-01
    • 1970-01-01
    • 2011-03-20
    相关资源
    最近更新 更多