【问题标题】:Data Fusion not allow Struct type from Bigquery数据融合不允许来自 Bigquery 的 Struct 类型
【发布时间】:2021-06-02 13:11:24
【问题描述】:

我正在尝试在 Datafusion 上创建一个管道以从 STRUCT 类型的 bigquery 读取表,但收到此错误:

2021-06-01 19:13:53,818 - WARN  [service-http-executor-1321:i.c.w.s.c.AbstractWranglerHandler@210] - Error processing GET /v3/namespaces/system/apps/dataprep/services/service/methods/contexts/interoper_prd/connections/interoper_bq_prd/bigquery/raw_deep/tables/deep_water_report/read?scope=plugin-browser-source, resulting in a 500 response.
java.lang.RuntimeException: BigQuery type STRUCT is not supported

【问题讨论】:

  • 您能告诉我您是如何设置管道的吗?另外,您是否遵循此documentation 以获取有关如何执行此操作的一般指南?目前,Data Fusion 支持 BQ Struct 类型,请参阅 12
  • 嗨@AlexandreMoraes 我在我的管道中添加了源bigquery,并尝试连接一个结构类型的bigquery表,并收到错误:'BigQuery type STRUCT is not supported。"我看到了你发送的链接,但我没有找到具有此功能的新插件

标签: google-bigquery google-cloud-data-fusion cdap


【解决方案1】:

我能够重现您的问题。为此,我在GCP Issue Tracker平台here中打开了一个Issue。

产品团队已经知道投诉,您可以在案例comments 中看到。请关注该主题以获取任何更新。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 2018-08-21
    • 1970-01-01
    • 2018-10-09
    • 1970-01-01
    • 2019-01-25
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多