【问题标题】:Is there any Schema generator for XML input for Spark?是否有任何用于 Spark 的 XML 输入的模式生成器?
【发布时间】:2021-10-15 17:35:55
【问题描述】:

我有大而复杂的 XML 文件,可以从 Spark 程序中读取。手动编写 Schema 将是一项繁重的任务。那么,有没有现成的工具可以从 XML 文件中生成 Schema(StructType)?

【问题讨论】:

  • 谷歌“XML 模式生成器”。
  • 我想要一个生成 StructType 的。
  • 如果您想添加信息,您可以随时编辑问题。

标签: xml apache-spark schema


【解决方案1】:

您可以使用spark-xml 库从 spark 读取 xml 文件。这将解析 xml 并给你一个数据框。您可以使用选项inferSchema 来推断适当的类型。

【讨论】:

  • 不,我不想要那个,我真的想要一些工具来生成架构。
猜你喜欢
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2011-12-06
  • 1970-01-01
  • 1970-01-01
  • 2010-11-12
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多