【问题标题】:Create set from pandas series with NaN's [duplicate]使用 NaN 从 pandas 系列创建集合 [重复]
【发布时间】:2018-12-26 07:08:36
【问题描述】:

我正在使用 pandas 清理一些数据文件并验证内容。在验证中,我将每一列的内容与一组预期值进行比较

for col_name, expected in expected_dict.items():
    col_values = set(df[col_name])
    if not col_values.issubset(expected):
        raise ValueError(str(col_values - expected),'in',col_name)

我在使用 NaN 时遇到了一些意外行为。具体来说,set(series) 将每个 NaN 视为唯一元素。我想出了一个解决方案,就是set(series.unique())。

s = pd.Series([1,2,1,None,3,None])
set(s) ## Produces {nan, 1.0, 2.0, 3.0, nan}
set(s.unique()) ## Produces {nan, 1.0, 2.0, 3.0}

我的问题是为什么会遇到这种行为?我怀疑它与熊猫中 NaN 的表示有关。

【问题讨论】:

    标签: python pandas dataframe set series


    【解决方案1】:

    与所有其他数字不同,NaN 的一个属性是 NaN != NaN。但是,set first 的实现会在尝试插入新成员之前检查 id(x) 是否与哈希索引处的现有成员匹配。如果您有两个具有不同 id 且都具有值 NaN 的对象,您将在集合中获得两个条目。如果它们都具有相同的 id,则它们会折叠成一个条目

    【讨论】:

      猜你喜欢
      • 2021-02-21
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2023-03-20
      • 2018-01-31
      • 2017-01-25
      • 2021-12-31
      • 2021-07-16
      相关资源
      最近更新 更多