Google Cloud SQL Server 数据到 BigQuery答案

【问题标题】：Google Cloud SQL Server data to BigQueryGoogle Cloud SQL Server 数据到 BigQuery
【发布时间】：2023-03-31 20:25:01
【问题描述】：

我需要将 Google Cloud SQL Server 数据库中的数据导出到 BigQuery，以便进行一些数据分析和报告。我发现推荐的方法是使用BigQuery Cloud SQL federated query，但这不支持 SQL Server 数据库，仅支持 Google Cloud SQL 服务中的 MySql 和 Postgres。

我正在寻找一种使用 Google Cloud 资源实现此目的的方法，可能是批处理 ETL 工具或流式工具。要求是 BigQuery 中的数据应实时或接近实时刷新。我是 Google Cloud 的新手。

【问题讨论】：

标签： google-cloud-platform google-bigquery google-cloud-sql

【解决方案1】：

编写可以发布到 Pubsub 主题的 Pubsub 客户端服务器上下文。此客户端将用于 (1) Worker 完成创建分析时和 (2) Exporter 完成导出数据时。可以参考this链接

【讨论】：