【问题标题】:Create json file from dataset in spark scala从 spark scala 中的数据集创建 json 文件
【发布时间】:2018-06-17 18:41:00
【问题描述】:

我有以下数据集:

+------+-----------+-------+----------+
|userID|   A       |B      |  C       |
+------+-----------+-------+----------+
|1     |242.0      |NULL   |7         |
|2     |NULL       |3.0    |5.0       |
|3     |NULL       |70.0   |17.0      |

我想把它转换成下面的json格式:

"result":
[
{"userID": 1, "A": 242.0, "B": NULL, "C": 7 }, 
{"userID": 2, "A": NULL, "B": 3.0, "C": 5.0 }, 
{"userID": 3, "A": NULL, "B": 70.0, "C": 17.0 }, 
]

感谢您的帮助。

【问题讨论】:

标签: scala apache-spark apache-spark-sql


【解决方案1】:

myDataset.write.json("/tmp/my_dir/")

【讨论】:

    猜你喜欢
    • 2017-01-24
    • 2017-12-24
    • 1970-01-01
    • 1970-01-01
    • 2021-03-03
    • 2016-09-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多