【问题标题】:Filter outliers from Pandas dataframe from all columns except one从除一列之外的所有列中过滤来自 Pandas 数据帧的异常值
【发布时间】:2017-05-24 07:58:37
【问题描述】:

假设我有一个带有特征和标签的数据框:

f1    f2   label
-1000 -100 1
-5    3    2
0     4    3
1     5    1
3     6    1
1000  100  2

我想从 f1 和 f2 列中过滤异常值以获得:

f1    f2   label
-5    3    2
0     4    3
1     5    1
3     6    1

我知道我可以这样做:

data = data[(data > data.quantile(.05)) & ( data < data.quantile(.95))]

但“标签”列也会被过滤掉。如何避免过滤某些列?我不想手动过滤所有列,因为它们有几十个。 谢谢。

【问题讨论】:

    标签: python pandas dataframe filtering percentile


    【解决方案1】:

    下面的方法怎么样:

    In [306]: x = data.drop('label', 1)
    
    In [307]: x.columns
    Out[307]: Index(['f1', 'f2'], dtype='object')
    
    In [308]: data[((x > x.quantile(.05)) & (x < x.quantile(.95))).all(1)]
    Out[308]:
       f1  f2  label
    1  -5   3      2
    2   0   4      3
    3   1   5      1
    4   3   6      1
    

    【讨论】:

    猜你喜欢
    • 1970-01-01
    • 2019-07-25
    • 1970-01-01
    • 1970-01-01
    • 2021-11-13
    • 2016-09-27
    • 2019-04-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多