使用 OpenCV 检测帧

Question

我有一个预定义的参考视频帧，我想在大量视频文件中检测它。我根据参考帧测试每个视频帧，但我不确定什么是最好的算法。

目前我正在使用 matchTemplate / TM_CCOEFF，它有点工作，但有点奇怪。这是一个 1:1 的匹配，所以我得到一个 1x1 的结果，其中的数字非常大（大于 MAX 整数）。很难设置任何阈值（我需要容忍质量较差的视频），因为这个数字是任意的。

我想知道是否有更好的方法，或者我只是以错误的方式使用它？

// 编辑 OK，我认为阈值的问题是我对双精度值的错误解释，TM_CCOEFF_NORMED 返回 0.0-1.0 值。

Answer 1

好吧，为了处理压缩伪影和其他事情，我不得不说减法方法并不像许多人想象的那么好。当由于压缩导致图像对比度出现噪声和变化时，最好使用更强大的方法，例如相关方法，它可能会在时间上有点昂贵，但更精确。我使用了ZNCC（零均值互相关），它工作得很好，我在运动检测中使用它假设相机是固定的，它工作得很好。

您可以做一些事情来降低使用积分图像的计算成本，这里是example。另外我建议使用较低分辨率的图像来更快地完成它，并且不会那么糟糕，因为这种方法对某些变化和噪声非常稳健。最后，您可以通过查看视频帧中的最高相关系数来跟踪您想要的帧。