【发布时间】:2021-04-06 08:15:43
【问题描述】:
最终目标:将 csv 文件内容从谷歌云存储桶传输到 BigQuery 数据集中的表中。
问题:数据传输似乎工作正常,未显示任何错误/警告,但数据未能到达目标表。
- 预先创建的数据集/表
- bkt 创建并上传了一个 csv 文件
- 创建并配置数据传输以将所有文件从上述存储桶传输到我的目标表。
- 传输是按需定义的。
我是 bigQuery 和 GCP 的新手,但数据传输的想法对我来说似乎很直观。 我假设我在这里遗漏了一些东西,但流程没有通知我。 所以我认为这可能是权限(我有 bigQuery Admin 角色等等......) 我认为这是一个位置/地区的事情,但所有资源都在欧盟..
你能帮我理解我还缺少什么吗? 附上一些可能有帮助的图片。
Bucket Configuration (where my csv resides)
Data Transfer output showing a successful action
提前致谢。
【问题讨论】:
-
您能否检查您的 id 上是否具有最低“BigQuery 数据编辑”角色?这可能是个问题。
-
非常感谢 Vibhor 的回答。在我使用 BQ 数据编辑器更新我的角色后,我设法完成了这项工作。我仍然不明白为什么我没有收到任何通知,这对我来说似乎是一个问题/错误。无论如何,您能否将其发布为答案,以便我接受它作为正确答案。
标签: google-bigquery google-cloud-data-transfer