【问题标题】:How to compare performances of AVRO and parquet file formats in streamsets?如何比较流集中 AVRO 和 parquet 文件格式的性能?
【发布时间】:2020-08-12 16:54:06
【问题描述】:

avro 和 parquet 文件均已成功存储在 GCS 中。有什么方法可以比较他们在streamset中的表现

【问题讨论】:

  • 您能否描述一下您的流程并详细说明您想要比较的内容?

标签: google-cloud-platform google-bigquery avro parquet streamsets


【解决方案1】:

Avro 是一种基于行的数据格式,而 Parquet 是一种行列式数据格式,因此它实际上取决于您的用例。在决定使用哪一个时,请查看此great article on things to consider

干杯, 破折号

【讨论】:

    猜你喜欢
    • 2020-04-19
    • 1970-01-01
    • 2020-09-21
    • 2022-10-14
    • 2021-07-18
    • 2014-06-22
    • 2021-05-02
    • 2017-11-08
    • 2016-03-16
    相关资源
    最近更新 更多