【问题标题】:Run specific BigQuery job from Google Scripts API从 Google Scripts API 运行特定的 BigQuery 作业
【发布时间】:2018-04-10 13:41:00
【问题描述】:

是否可以从 BigQuery 运行特定作业,通过 Google Scripts API 的 jobId 调用它,而不是粘贴整个查询? 我想设置一个触发器来定期运行作业,但我不想将整个查询粘贴到 Scripts API,因为格式容易出错且耗时。 更新: 查询应该可以使用临时函数。

【问题讨论】:

  • 您一定要从 Google Scripts API 中运行您的脚本吗?
  • 我非常愿意这样做,因为我在为 bigquery 设置 cron 作业时遇到了很多问题

标签: google-bigquery


【解决方案1】:

不,您不能使用其 ID 重新运行类似的作业。但是您可以使用 API 来获取作业的详细信息并从中提取 SQL,即https://cloud.google.com/bigquery/docs/reference/rest/v2/jobs/get

我不完全确定您为什么不能只在脚本中包含 SQL。也就是说,无论如何,我还是将 SQL 放在 BigQuery 中的一个视图中,然后从您的脚本中调用该视图。

【讨论】:

  • 我试图避免在脚本中包含 SQL,因为一些较长的查询往往会在格式化 Google Scripts 格式时出现问题,而且我经常遇到无法检测到究竟是什么问题的问题查询,因为在不更改查询格式的情况下无法对其进行调试。
  • 你可以把它放在一个视图中
  • 是的,但我无法使用临时功能保存视图 :)
  • 新信息!你能用那个更新你原来的问题吗?
【解决方案2】:

作业是查询的一个实例,因此从技术上讲,您不能多次运行同一个作业。您可能可以访问作业详细信息并获取查询,但使用给定查询创建新作业会简单得多。

我看到您希望避免较长的查询遇到格式错误。如果您的工作只是阅读内容,那么您可以为复杂的查询创建视图并触发执行 Select * from view 的工作。这样,您 1) 可以直接在 BQ UI 上轻松访问查询定义,并且 2) 在组装作业时不会遇到格式问题

【讨论】:

  • 我无法使用临时功能保存视图,这对我来说是个障碍。
  • 这看起来你只是简单地接受了我的回答并稍微改写了它!
猜你喜欢
  • 2018-05-23
  • 1970-01-01
  • 2020-02-04
  • 2015-05-26
  • 2019-08-13
  • 1970-01-01
  • 1970-01-01
  • 2020-04-27
  • 1970-01-01
相关资源
最近更新 更多