【问题标题】:custom file names for PubSubToText dataflow templatePubSubToText 数据流模板的自定义文件名
【发布时间】:2021-10-05 02:54:01
【问题描述】:

我正在使用 PubsubToText 谷歌提供的流媒体模板来提取来自 Cloud Pub/Sub 主题的传入数据,并将数据输出到指定输出目录的窗口文件中。

它以以下格式创建文件: prefix2021-07-26T15:30:00.000Z-2021-07-26T15:35:00.000Z-pane-0-last-00-of-01suffix

但我想要以下格式: prefix.MMDDYYYYHHMISS.suffix

任何建议都会有很大帮助。谢谢。

【问题讨论】:

    标签: google-cloud-platform google-cloud-dataflow apache-beam


    【解决方案1】:

    我不知道你是否可以直接在数据流模板中执行此操作。但一种解决方案是创建一个由Google Cloud Storage google.storage.object.finalize event 触发的云函数,它会根据需要重命名您的文件并将其推送回另一个云存储桶。

    【讨论】:

      猜你喜欢
      • 2021-01-13
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2013-09-10
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2021-11-15
      相关资源
      最近更新 更多