删除重复值不起作用 - 预期的布尔值？

Question

我的数据集看起来像

我正在尝试 2 个函数来清理 df - 首先删除 df 中所有相等的组合 - 这意味着如果相同的 id 像第 1 行和第 3 行一样组合在一起，它会删除它，但是当我尝试第二个函数时然后删除每列中的任何重复项 - 它运行没有错误，但实际的重复项没有被删除？

def remove_dup_combos(df):
u = df.filter(like='id').values
m = pd.DataFrame(np.sort(u, axis=1)).duplicated()
df = df[~m]

return df



def remove_dups(df):
   df = df = df.drop_duplicates(['id1', 'id2'])

  return df

Answer 1

如果需要删除两列的重复项，我相信您需要：

df = df.drop_duplicates(['id1', 'id2'])

---

您的解决方案不同 - 先分别删除重复项，然后依次查看第二列：

df = df.drop_duplicates(['id1'], inplace = False)
df = df.drop_duplicates(['id2'], inplace = False)

参数inplace = False默认在DataFrame.drop_duplicates，所以应该去掉：

df = df.drop_duplicates(['id1'])
df = df.drop_duplicates(['id2'])