【问题标题】:Glue create_dynamic_frame.from_catalog return empty data胶水 create_dynamic_frame.from_catalog 返回空数据
【发布时间】:2021-02-02 03:18:03
【问题描述】:

我正在调试 create_dynamic_frame.from_catalog 不返回数据的问题,尽管我能够通过 Athena 查看数据。

Data Catelog 指向 S3 文件夹,并且有多个结构相同的文件。文件类型为csv,分隔符为空格“”,由两列(字符串和json字符串)组成,没有标题。

这是 CSV 格式的文件。

这是使用爬虫生成的 Athena 查询。

调试时数据帧没有返回结果,有什么想法吗?

【问题讨论】:

  • 我也面临同样的问题

标签: amazon-s3 etl aws-glue amazon-athena aws-glue-data-catalog


【解决方案1】:

查看您是否为此作业启用了书签。如果您多次运行它,则需要重置书签或禁用它。

要检查的另一件事是日志。也许你可以找到一些 AccessDenied,运行作业的角色可能无权访问此存储桶。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2018-09-26
    • 1970-01-01
    • 2020-11-27
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多