【问题标题】:Bigquery Pricing - Copying Data between two tablesBigquery 定价 - 在两个表之间复制数据
【发布时间】:2017-02-12 05:27:44
【问题描述】:

我了解 Big Query 中的复制和加载操作是免费的 -> https://cloud.google.com/bigquery/pricing

我正在尝试执行 ETL 操作,该操作需要将数周的数据从日期分区表复制到新的临时表(ODS 区域)中以执行一些更新操作。更新完成后,我需要截断数据并将数据重新加载回日期分区目标表中的相应分区。 此操作移动大量数据,我试图弄清楚 Big Query 是否对选择性复制收费(仅选择基于 _partitiontime 的分区将其带到临时 ODS,然后将临时表复制回分区表)。

【问题讨论】:

    标签: google-bigquery


    【解决方案1】:

    分区装饰器在复制表时起作用。因此,您可以:

    1. 将分区输出(免费)复制到单独的表中
    2. 对此表进行任何操作(查询成本)
    3. 将新表复制回分区(免费)

    【讨论】:

      猜你喜欢
      • 2012-04-03
      • 1970-01-01
      • 1970-01-01
      • 2013-01-25
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多