【发布时间】:2021-06-02 13:11:24
【问题描述】:
我正在尝试在 Datafusion 上创建一个管道以从 STRUCT 类型的 bigquery 读取表,但收到此错误:
2021-06-01 19:13:53,818 - WARN [service-http-executor-1321:i.c.w.s.c.AbstractWranglerHandler@210] - Error processing GET /v3/namespaces/system/apps/dataprep/services/service/methods/contexts/interoper_prd/connections/interoper_bq_prd/bigquery/raw_deep/tables/deep_water_report/read?scope=plugin-browser-source, resulting in a 500 response.
java.lang.RuntimeException: BigQuery type STRUCT is not supported
【问题讨论】:
-
您能告诉我您是如何设置管道的吗?另外,您是否遵循此documentation 以获取有关如何执行此操作的一般指南?目前,Data Fusion 支持 BQ Struct 类型,请参阅 1 和 2。
-
嗨@AlexandreMoraes 我在我的管道中添加了源bigquery,并尝试连接一个结构类型的bigquery表,并收到错误:'BigQuery type STRUCT is not supported。"我看到了你发送的链接,但我没有找到具有此功能的新插件
标签: google-bigquery google-cloud-data-fusion cdap