【问题标题】:What is the metadata attribute of Spark's StructField objectSpark的StructField对象的元数据属性是什么
【发布时间】:2021-03-01 15:28:11
【问题描述】:

我目前正在尝试查找 Spark 中 StructField 对象的metadata 属性的用途。

我已经搜索了官方文档https://spark.apache.org/docs/latest/api/python/pyspark.sql.html?highlight=structfield#pyspark.sql.types.StructField

但是我还是不明白这个变量的用途。例如,我可以通过metadata 设置主键选项吗?如果是,这个字典应该是什么样子?

或者更一般地说,它的目的是什么以及如何使用它?

【问题讨论】:

    标签: apache-spark pyspark


    【解决方案1】:

    我也不完全确定,但我知道您可以将文档字符串放在那里。然后您可以进行所有选择,只要您继续复制列(无表达式),元数据就可以原封不动地拉出。这对于在我的计算表上制作自动化文档很有用。

    【讨论】:

      猜你喜欢
      • 2015-07-14
      • 1970-01-01
      • 2019-09-06
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2015-01-18
      • 2018-04-30
      • 2023-03-22
      相关资源
      最近更新 更多