如何过滤一组数据中的异常值？

Question

我正在尝试过滤数据，如第一张图片所示。有周期性发生的异常值。过滤这些异常值的最佳方法是什么？我想要一组数据，如第二张图片所示。

我的目标是在使用多项式过滤后拟合这些数据。

有没有办法在 python 中不费吹灰之力地做到这一点？如果没有，提示正确的算法会很棒。

带有标记异常值的数据：

目标：

Answer 1

您可以使用 scikit-learn 运行多项式回归。确保创建了足够多的特征，以便获得一条在观察时看起来不错的拟合线。一旦你有了那个多项式，那么我认为通过找到离群函数到多项式函数的距离并设置阈值来找到异常值会很简单。