【问题标题】:# of records loaded through AWS Redshift通过 AWS Redshift 加载的记录数
【发布时间】:2021-06-15 19:22:19
【问题描述】:

有没有办法通过 AWS 控制台了解使用 AWS 数据管道加载到 redshift 表中的记录数?

【问题讨论】:

    标签: amazon-web-services amazon-redshift aws-data-pipeline


    【解决方案1】:

    您可以从STL_LOAD_COMMITS 表中获取该信息。

    特别看lines_scanned专栏:

    从加载文件中扫描的行数。此数字可能与实际加载的行数不匹配。例如,根据 COPY 命令中的 MAXERROR 选项,加载可能会扫描但容忍许多不良记录。

    喜欢

    SELECT * FROM STL_LOAD_COMMITS
    ORDER BY curtime DESC
    LIMIT 10
    

    【讨论】:

    • MAXERROR 应始终设置为零,这是一种良好的做法。传入的文件应该完全加载,或者根本不加载。来自部分负载的复杂性实际上是无法证明的。
    猜你喜欢
    • 2022-08-04
    • 1970-01-01
    • 1970-01-01
    • 2022-01-03
    • 2019-06-07
    • 1970-01-01
    • 2020-06-04
    • 2021-07-07
    • 2014-01-25
    相关资源
    最近更新 更多