【问题标题】:parquet version used to write a fileparquet 版本用于写入文件
【发布时间】:2015-11-18 16:22:41
【问题描述】:

有没有办法找出在 HDFS 中写入 parquet 文件时使用的 parquet 版本? 我正在尝试查看是否使用相同的镶木地板版本或不同版本编写了各种文件。

【问题讨论】:

    标签: hadoop hdfs parquet


    【解决方案1】:
    $ hadoop jar parquet-tools-1.9.0.jar meta my-parquet-file.parquet |grep "parquet-mr version"
    
    creator:                     parquet-mr version 1.8.1 (build 4aba4dae7bb0d4edbcf7923ae1339f28fd3f7fcf)
    

    【讨论】:

    【解决方案2】:

    使用 parquet-tools 的其他选项

    parquet-tools meta --debug file.parquet
    

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2021-12-24
      • 1970-01-01
      • 1970-01-01
      • 2019-07-03
      • 2019-07-06
      • 2017-09-25
      相关资源
      最近更新 更多