【问题标题】:Dataflow access to pubsub access tokens对 pubsub 访问令牌的数据流访问
【发布时间】:2019-07-12 15:59:15
【问题描述】:

在本地运行我的 apache beam / google 数据流管道时,python SDK 似乎在流式管道的每个输入上都请求一个新的身份验证令牌 - 这正常吗?

INFO:oauth2client.transport:Attempting refresh to obtain initial access_token
INFO:oauth2client.client:Refreshing access_token

【问题讨论】:

  • 嗨@dendog,你知道这是来自你的代码还是SDK?日志是否有与之关联的行号?

标签: google-cloud-platform google-cloud-dataflow apache-beam


【解决方案1】:

这看起来类似于https://issues.apache.org/jira/browse/BEAM-2264,但是那里的解决方案不能解决这个问题。 无论如何,这是不正常的(DirectRunner 可能是多个新客户端),但对于运行大多数本地作业来说也可能没问题。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 2020-01-09
    • 2021-08-23
    • 2020-03-10
    • 2011-12-31
    • 2012-05-07
    • 2018-02-17
    • 2019-08-25
    • 2023-02-02
    相关资源
    最近更新 更多