人脸图像聚类

Question

我从视频中提取了人脸，并将它们聚集成大组（每个组都包含来自同一个人的人脸，我通过改变背景检测来做到这一点）。现在我想将这些组聚集成较少数量的组，最后让每个人出现在视频中的一组。

目前，我设法使用颜色直方图和 K-means 对这些组进行聚类。 问题在于，当两个不同的人的肤色和头发颜色过于接近时，集群就会很糟糕。我可以为此使用哪些其他功能？我尝试了 DAISY 描述符，但结果并不有趣。 我也想制作这些集群，而不必指定我想在最后拥有的集群数量。

Answer 1

要创建集群而不必指定最后要拥有的集群数量，您可以使用基于 MST 的集群：https://sites.google.com/site/dataclusteringalgorithms/mst-based-clustering-algorithm

要让每个人出现在视频中，您需要在人脸之间建立更好的相似度函数。最先进的人脸识别系统使用卷积神经网络方法。您可以在 Facebook 文章中了解更多信息：https://www.cs.toronto.edu/~ranzato/publications/taigman_cvpr14.pdf。