【发布时间】:2017-06-03 08:03:29
【问题描述】:
修改我的作业以在从 PubSub 读取时开始使用 timestampLabel 后,每次我尝试启动作业时资源设置似乎都会中断,并出现以下错误:
(c8bce90672926e26): Workflow failed. Causes: (5743e5d17dd7bfb7): Step setup_resource_/subscriptions/project-name/subscription-name__streaming_dataflow_internal25: Set up of resource /subscriptions/project-name/subscription-name__streaming_dataflow_internal failed
project-name 和 subscription-name 代表我的项目的实际值和我试图从中读取的 PubSub 订阅。在尝试在消息条目上附加 timestampLabel 之前,该作业正常工作,使用来自指定 PubSub 订阅的消息,这应该意味着我的 API/网络设置正常。
我还注意到有效载荷的两个警告
Internal Issue (119d3b54af281acf): 65177287:8503
但在工作人员日志中找不到更多信息。在我的工作设置的几秒钟内,我可以看到在管道的第一步中设置了timestampLabel。不幸的是,我找不到有关此错误的任何其他案例或文档。
【问题讨论】:
-
失败作业的作业 ID 是什么?
-
@BenChambers 其中之一是 2017-01-18_09_26_55-6088470432791782708。谢谢!
标签: google-cloud-platform google-cloud-dataflow apache-beam