按多列分组以查找重复的行 pandas

Question

我有一个df

id    val1    val2
 1     1.1      2.2
 1     1.1      2.2
 2     2.1      5.5
 3     8.8      6.2
 4     1.1      2.2
 5     8.8      6.2

我想按val1 and val2 进行分组，并仅获得具有相同val1 and val2 组合多次出现的行的相似数据框。

最终df：

id    val1    val2
 1     1.1      2.2
 4     1.1      2.2
 3     8.8      6.2
 5     8.8      6.2

Answer 1

您需要带有参数subset 的duplicated 指定列以使用keep=False 检查所有重复项以通过boolean indexing 进行掩码和过滤：

df = df[df.duplicated(subset=['val1','val2'], keep=False)]
print (df)
   id  val1  val2
0   1   1.1   2.2
1   1   1.1   2.2
3   3   8.8   6.2
4   4   1.1   2.2
5   5   8.8   6.2

详情：

print (df.duplicated(subset=['val1','val2'], keep=False))
0     True
1     True
2    False
3     True
4     True
5     True
dtype: bool