特征点检测

1. Harris角点检测

角点检测的基本思想是:使用角点检测算子,对图像的每个像素计算角点响应函数(Corner Response Function ),阈值化角点响应函数,根据实际情况选择阈值,对阈值化的角点响应函数进行非极大值抑制,并获取非零点作为角点。

特征点检测与稳定性判断
特征点检测与稳定性判断

其中
1)图像中的直线,一个特征值大,另一个特征值小, 此时R<0
2)图像中的平面,两个特征值都小,且近似相等, 此时 R 很小
3)图像中的角点,两个特征值都大,且近似相等, 此时 R 很大

Harri角点对亮度和对比度变化不敏感
Harris角点具有旋转不变性
Harris不具有尺度不变性

2.SIFT特征点检测

尺度空间理论: http://www.cnblogs.com/ronny/p/3886013.html
可以证明: 高斯核是实现尺度变换的唯一变换核。
SIFT算法的特点有:

SIFT特征是图像的局部特征,其对旋转、尺度缩放、亮度变化保持不变性,对视角变化、仿射变换、噪声也保持一定程度的稳定性;
独特性(Distinctiveness)好,信息量丰富,适用于在海量特征数据库中进行快速、准确的匹配;
多量性,即使少数的几个物体也可以产生大量的SIFT特征向量;
高速性,经优化的SIFT匹配算法甚至可以达到实时的要求;
可扩展性,可以很方便的与其他形式的特征向量进行联合

SIFT算法步骤

尺度空间极值检测:搜索所有尺度上的图像位置。通过高斯微分函数来识别潜在的对于尺度和旋转不变的兴趣点。

关键点定位:在每个候选的位置上,通过一个拟合精细的模型来确定位置和尺度。关键点的选择依据于它们的稳定程度。

方向确定:基于图像局部的梯度方向,分配给每个关键点位置一个或多个方向。所有后面的对图像数据的操作都相对于关键点的方向、尺度和位置进行变换,从而提供对于这些变换的不变性。

关键点描述:在每个关键点周围的邻域内,在选定的尺度上测量图像局部的梯度。这些梯度被变换成一种表示,这种表示允许比较大的局部形状的变形和光照变化。

构建尺度空间

尺度空间理论目的是模拟图像的多尺度特征,高斯核是实现尺度变换的唯一线性核,二维尺度空间定义为;
特征点检测与稳定性判断
从图中可以看出,构建尺度空间分为两步

对图像进行不同程度的高斯模糊得到每一层的若干幅图像
对上一层倒数第三幅图像(为了保持尺度空间的连续性)进行下采样,得到下一层(octave)
在得到了尺度空间后,则要构建高斯差分金字塔:如下图所示,首先将同一层不同尺度的图像做差,得到DOG, 为了检测不同尺度下的极值点,中间检测点需要和同一尺度下相邻的8个点,同时和上下层的9*2=18个点作比较,如果是这26个点中最大或最小值,则初步认为是一个极值点,从上面分析可知,要想在一层S个尺度下检测特征点,则需要S+2高斯差分金字塔,S+3尺度金字塔;
特征点检测与稳定性判断

关键点定位

上述的过程得到的是离散形式下的极值点,并非真正意义上的极值点,因此需要将离散空间插值到连续空间得到极值点,该方法叫子像元插值方法:
特征点检测与稳定性判断

特征点检测与稳定性判断

关键点方向确定

特征点检测与稳定性判断

关键点特征描述子

将坐标轴旋转到关键点的方向,以确保旋转不变性
特征点检测与稳定性判断

计算keypoint周围的16*16(邻域的范围根据尺度确定,这里仅举一个例子)的window中每一个像素的梯度,而且使用高斯下降函数降低远离中心的权重。
在每一个4×4的小块计算8个方向梯度直方图,绘制梯度方向的累加值,即可形成16个种子点,则这样对每一个feature形成一个4×4×8=128维特征描述子。每一维表示的是每个格子的 scale/orientation
特征点检测与稳定性判断

将这个向量进一步归一化,就除去了光照的影响。

根据特征描述子进行Match

生成了A B两幅图的描述子,就可以把两幅图中各个scale的描述子计算欧式距离,进行匹配。

具体来说,对于图像A中的某个特征点,首先根据欧氏距离会在图像B中寻找两个匹配点,如果最邻近距离与次邻近距离距离比率小于某个阈值才认为是正确匹配,减少匹配点的数量,使结果更稳定。

作者建议ratio的取值原则如下:
ratio=0. 4 对于准确度要求高的匹配;
ratio=0. 6 对于匹配点数目要求比较多的匹配;
ratio=0. 5 一般情况下。

参考博客

Harris特征点检测
https://www.cnblogs.com/ronny/p/4009425.html
https://docs.opencv.org/3.0-beta/doc/py_tutorials/py_feature2d/py_features_harris/py_features_harris.html
sift特征点检测
https://blog.csdn.net/dcrmg/article/details/52561656
https://www.jianshu.com/p/03449c6b42c4
https://blog.csdn.net/zddblog/article/details/7521424
http://www.cnblogs.com/ronny/p/4028776.html#3962356

相关文章:

  • 2021-08-11
  • 2021-10-26
  • 2021-10-17
  • 2022-12-23
  • 2021-09-18
  • 2022-02-11
  • 2021-12-02
猜你喜欢
  • 2021-09-26
  • 2021-12-22
  • 2021-12-18
  • 2021-11-09
  • 2021-11-27
  • 2021-09-27
相关资源
相似解决方案