在 BigQuery 中更改分区表的数据类型

Question

我在 BigQuery 中有一个分区表来存储用户事件，它具有以下架构，

user_id - String, Required
event_time - DateTime, Required
country - String, Nullable
_PARTITIONTIME - event occurred date

上表包含两年的数据（意味着 730 个分区）。

出于某种原因，我想将数据类型从DateTime 更改为Timestamp。我发现了一个类似的问题here 和here，这些对于非分区表来说都很好。但就我而言，我有分区表，所以我需要保留值_PARTITIONTIME。

经过一些研究我发现，使用Destination Table 作为table_name$20180126 运行以下查询似乎可以实现我对单个分区的目标，

SELECT user_id, CAST(event_time AS TIMESTAMP) AS event_time, country from [project-id:data_set.table_name] WHERE _PARTITIONTIME >= "2018-01-26 00:00:00" AND _PARTITIONTIME < "2018-01-27 00:00:00"

但问题是，我有一个表的 730 个分区（类似地，我还有 10 个这样的表），在 Web 控制台或通过 API 或通过 BQ 命令行中逐个运行上述查询将需要很长时间。还有其他更好的方法可以以最少的工作量实现用例吗？

Answer 1

在 cmets 中有很多讨论，但我想强调两点。

1. 从今天开始，您可以使用create partitioned tables using an existing column TIMESTAMP 或 DATETIME 类型作为分区定义器。

2. 还有为Manually Changing Table Schemas发布的指南

您可能希望阅读这两个建议，尤其是第一个对您很方便的建议，并且您会选择重新加载数据以获得很多好处。