【问题标题】:Getting data quality in Delta Live Table (bronze, gold, silver..)在 Delta Live Table 中获取数据质量(青铜、黄金、白银..)
【发布时间】:2022-07-12 21:32:10
【问题描述】:

如何使用 python 检查 Delta Live Table 是否在青铜、金或银层(区域)?我有用于创建 Delta Live Table 管道的笔记本,我需要知道什么是数据质量(银、铜、金)。如何使用 python 获取这些信息?

在 SQL 中存在类似TBLPROPERTIES('BRONZE') 的东西,对于 python 有类似的东西吗?

【问题讨论】:

  • 谁添加了这些表属性?

标签: python databricks azure-databricks delta-live-tables


【解决方案1】:

如果你有一个 sql 解决方案直接运行它

spark.sql('''SHOW TBLPROPERTIES table_name'')

【讨论】:

    【解决方案2】:

    你可以这样做:

    @dlt.table(
      comment="Bronze live streaming table for Test data",
      name="bronze_test_table",
      table_properties={
        "quality": "bronze"
      }
    )
    

    【讨论】:

      猜你喜欢
      • 2021-03-25
      • 1970-01-01
      • 1970-01-01
      • 2022-12-09
      • 2018-10-25
      • 2012-08-07
      • 1970-01-01
      • 2016-12-11
      • 1970-01-01
      相关资源
      最近更新 更多