将虚拟相机与真实相机匹配

Question

我正在尝试开发一个简单的增强现实应用程序。 我已经设置了一个装备，可以让我检测物理网络摄像头的旋转和位置。我将网络摄像头视频输入到一个小的 3d xna 应用程序中。在应用程序中，我将虚拟相机定位和旋转以匹配真实相机。

当我叠加 3d 图形透视线时，它的透视线似乎不太对齐，当我移动物理相机时，3d 图形的轨迹也不太正确。

让 3d 图形与真实世界的图像对齐需要哪些参数？

Answer 1

OpenCV 包括工具和关于camera calibration models 的精彩理论讨论，以及可用于纠正失真的方法。可以使用逆模型来扭曲生成的 3d 网格。