热和 RGB 多视图图像配准答案

【问题标题】：Thermal and RGB multi view image registration热和 RGB 多视图图像配准
【发布时间】：2021-12-07 21:51:19
【问题描述】：

我设置了一个 IR 和 RGB 摄像头，使它们彼此相距 2 厘米（水平方向）。我的目标是融合这两个图像（RGB 和 IR）以获得更丰富的图像。由于 RGB 和 IR 数据之间的偏移，两个图像都不匹配。有没有办法对齐图像，使它们在同一个坐标系上。

【问题讨论】：

请编辑问题以将其限制为具有足够详细信息的特定问题，以确定适当的答案。
分享您的图片让人们更好地帮助您怎么样？在这里阅读...pyimagesearch.com/2020/08/31/…
"register" 是指记录吗？ "fuse" 是否表示混合（叠加）？你是一个想要编写这样的软件的程序员吗？如果不是编码员，那么可以尝试 FFmpeg。它可能允许来自两个摄像头的输入，然后您可以添加一些图层混合命令...

【解决方案1】：

我建议执行边缘检测（或类似的方法以减少两个图像中的信息量），然后将一个图像包裹到另一个图像上。

如果您使用的是 OpenCV，我建议您使用 findTransformECC() 方法 (doc) 来找到在图像之间获得最佳叠加所需的转换矩阵。

您可以使用带有 warpAffine() 方法的变换矩阵扭曲第二张图像 (doc)。

【讨论】：