Spark ML：平滑输入数据

Question

通过使用 Spark 开发一个新的 ML 项目，我们希望首先平滑输入数据以减少噪音（然后因为我们可能使用少量数据进行训练而获得更好的结果）。

奇怪的是，我在 Spark-ML 中找不到平滑滤波器（例如 Kalman）。 Spark-ML 用户是自己开发的，还是不先过滤输入数据？有这样的实现吗？

Answer 1

您可以导入 Java 或 Scala 的第三方库。