如何找到同一对象的两个相似图像之间的对应关系或映射

Question

我有两张房子的照片，相机只从第二张照片的位置移动了大约 1 米或大约 1 英尺。所以对于第一张和第二张照片来说，它们非常相似，只是视角略有不同。

我想生成一个映射，第一张照片和第二张照片之间的对应关系。我想知道，对于第一张照片中的像素，它们在第二张照片和相反方向上映射到哪里。

我想有一些方法可以检测照片之间的相似结构，使用这种方法我可以粗略猜测像素的去向。

对于这个问题的第二部分，如果某些特征被隐藏或暴露，我该如何解决这个问题，例如房子和相机之间有一棵树。所以当我移动相机时，树会显示一些像素并隐藏一些像素，因为它位于相机和房子之间。

Answer 1

您可能想查看SIFT algorithm。

Answer 2

我想指出，SIFT 和 SURF 不会解决这个问题，它们会在另一个图像中找到一个图像。他们识别图像 A 在图像 B 中的位置。

但是，当相机移动一小段距离时，一些物体会移动并相互重叠。所以需要找出哪些物体相对于彼此移动，找出哪些物体与其他物体重叠。