【发布时间】:2021-10-05 01:31:24
【问题描述】:
我可以使用 gcs-connector 和 spark-bigquery-in Spark 应用程序从 Bigquery 获取数据。但是在尝试使用 spark 应用程序将数据加载到 GCP 中的 Bigquery 时出现以下错误。
Exception in thread "main" java.io.IOException: Error getting access token from metadata server at: http://169.254.169.254/computeMetadata/v1/instance/service-accounts/default/token
代码:
df_bigquery.write.format("bigquery").option("credentialsFile", "D://input/absolute-vertex-321015-a78e81ae77a0.json").option("parentProject", "absolute-vertex-321015").option("temporaryGcsBucket","emp_demo_1").save("absolute-vertex-321015.org.employee_loaded")
非常感谢任何帮助。
提前致谢。
【问题讨论】:
-
同样的错误,我也想要答案,你有解决办法吗??
-
@alakmarShafin 你能分享一个错误堆栈跟踪吗?
标签: apache-spark google-cloud-platform google-bigquery