【问题标题】:AWS CloudFormation Package Glue Extra Python FilesAWS CloudFormation 包粘合额外的 Python 文件
【发布时间】:2021-08-13 03:29:10
【问题描述】:

我正在尝试使用 Cloudformation 包来包含胶水脚本和来自 repo 的额外 python 文件,以便在包步骤期间上传到 s3。

对于胶水脚本,我可以在哪里使用很简单

  Properties:
  Command:
    Name: pythonshell #glueetl -spark # pythonshell -python shell...
    PythonVersion: 3
    ScriptLocation: "../glue/test.py" 

但是我怎样才能对额外的 python 文件做同样的事情呢?以下不起作用,似乎我可以使用 Include Transform 上传文件但不确定如何在 extra-py-files 中引用它?

      DefaultArguments: 
      "--extra-py-files": 
        - "../glue/test2.py"

【问题讨论】:

    标签: amazon-web-services amazon-cloudformation aws-glue


    【解决方案1】:

    很遗憾,你不能这样做。 package 只支持胶水:

    AWS::Glue::Job 资源的 Command.ScriptLocation 属性

    包装DefaultArguments 参数不支持。这意味着您必须在 CloudFormation 之外“手动”执行(例如创建 bash 脚本)。

    【讨论】:

      猜你喜欢
      • 2023-03-25
      • 1970-01-01
      • 1970-01-01
      • 2020-08-20
      • 2019-08-17
      • 1970-01-01
      • 2020-03-08
      • 2020-10-27
      • 1970-01-01
      相关资源
      最近更新 更多