我想实现一个管道，将数据存储在 Cloud Datastore 中，然后在 BigQuery 中增量读取它，将 Bigquery 数据转换为 Tf 记录，然后运行 ML Tf 算法。我没有将 json 文件导入数据存储并将数据从 Python 代码再次导出到 Bigquery 的干净方法。
【问题讨论】：
标签： google-bigquery google-cloud-datastore google-cloud-platform
我可以逐渐找到将 JSON 文件加载到 DataStore 的答案。
如何将 JSON 数据导入 Datastore 的答案是： https://cloud.google.com/datastore/docs/reference/data/rest/v1/Entity
可在此处找到 Google Datastore 支持的各种类型：
Cloud Datastore 现在具有导入和导出功能，可用于将 Cloud Datastore 实体加载到 BigQuery：
【讨论】：
对于任何搜索此内容的人，在 DataStore 文档迷宫的深处，您可以找到如何将本地数据文件类型（如 JSON、CSV 等）加载到 DataStore 数据库中，此处其他答案提供的链接已失效，因此您可以在这里找到去：
【讨论】：