原文:

http://blog.csdn.net/hujingshuang/article/details/47060677

简介

FREAK算法是2012年CVPR上《FREAK: Fast Retina Keypoint》文章中,提出来的一种特征提取算法,也是一种二进制的特征描述算子。

它与BRISK算法非常相似,个人觉得就是在BRISK算法上的改进,关于BRISK算法详见上一篇博文:BRISK特征提取算法。FREAK依然具有尺度不变性、旋转不变性、对噪声的鲁棒性等。

FREAK算法

采样模式

在BRISK算法中,采样模式是均匀采样模式(在同一圆上等间隔的进行采样);FREAK算法中,采样模式发生了改变,它采取了更为接近于人眼视网膜接收图像信息的采样模型。图中展示了人眼视网膜拓扑结构,Fovea区域主要是对高进度的图像信息进行处理,Para主要是对低精度的图像信息进行处理。采样点为:6、6、6、6、6、6、6、1,那个1是特征点。

从图中可以看出,该结构是由很多大小不同并有重叠的圆构成,最中心的点是特征点,其它圆心是采样点,采样点离特征点的距离越远,采样点圆的半径越大,也表示该圆内的高斯函数半径越大

特征描述

F表示二进制描述子,Pa是采样点对(与BRISK同理),N表示期望的二进制编码长度。

表示采样点对Pa中前一个采样点的像素值,同理,表示后一个采样点的像素值。

当然得到特征点的二进制描述符后,也就算完成了特征提取。但是FREAK还提出,将得到的Nbit二进制描述子进行筛选,希望得到更好的,更具有辨识度的描述子,也就是说要从中去粗取精。(也就是降维

1、建立矩阵D,D的每一行是一个FREAK二进制描述符,即每一行有N个元素;在上图的采样模式中公有43个采样点,可以产生N=43*(43-1)/2=903个采样点对,也就是说矩阵D有903修改于:2015-11-15);

2、对矩阵D的每一列计算其均值,由于D中元素都是0/1分布的,均值在0.5附近说明该列具有高的方差;

3、每一列都有一个均值,以均值最接近0.5的排在第一位,均值离0.5越远的排在越靠后,对列进行排序;

4、选取前512列作为最终的二进制描述符。(也可以是256、128、64、32等)

 小结:最原始的二进制长度为903,当然这包含了许多冗余或粗糙的信息,所以根据一定的方法取N个二进制长度,方法是建立矩阵D。假如提取到228个特征点,那么矩阵D应该是228行*903列,然后经过计算均值,将每个列重新排序,选取前N列,这个矩阵D就是228*N的矩阵了。当然这个N我在文中写得是512,你也可以是256、128、64、32这些都是可以的。 最终D的每一行仍然是一个特征点的描述符,只是更短小精悍而已,即降低了维度。(添加于:2016-01-11)

由于FREAK描述符自身的圆形对称采样结构使其具有旋转不变性,采样的位置好半径随着尺度的变化使其具有尺度不变性,对每个采样点进行高斯模糊,也具有一定的抗噪性能,像素点的强度对比生成二进制描述子使其具有光照不变性。因此由上述产生的二进制描述子可以用来进行特征匹配。在匹配之前,再补充一下特征点的方向信息。

特征方向

由于特征点周围有43个采样点,可产生43*(43-1)/2=903个采样点对,FREAK算法选取其中45个长的、对称的采样点对来提取特征点的方向,采样点对如下:

用O表示局部梯度信息,M表示采样点对个数,G表示采样点对集合,Po表示采样点对的位置,则:

同BRISK算法,可得到特征点的方向。

特征匹配

在特征描述中,我们得到了512bit的二进制描述符,该描述符的列是高方差——>低方差的排列,而高方差表征了模糊信息,低方差表征了细节信息,与人眼视网膜相似,人眼先处理的是模糊信息,再处理细节信息。因此,选取前128bit即16bytes进行匹配(异或),若两个待匹配的特征点前16bytes距离小于设定的阈值,则再用剩余的位信息进行匹配。这种方法可以剔除掉90%的不相关匹配点。注意:这里的16bytes的选取是建立在并行处理技术(SIMD)上的,并行处理技术处理16bytes与处理1bytes的时间相同;也就是说,16bytes并不是固定的,如果你的并行处理技术能处理32bytes与处理1bytes的时间相同的话,那么你也可以选取前32bytes。

#include <opencv2/core/core.hpp>
#include <opencv2/features2d/features2d.hpp>
#include <opencv2/highgui/highgui.hpp>
#include <opencv2/nonfree/features2d.hpp>
#include <opencv2/legacy/legacy.hpp>
#include <iostream>
#include <vector>using namespace cv;
using namespace std;int main(void)
{string filename1 = "beaver1.png";string filename2 = "beaver2.png";// FREAKMat imgA_Freak = imread(filename1);Mat imgB_Freak = imread(filename2);vector<KeyPoint> keypointsA_Freak, keypointsB_Freak;Mat descriptorsA_Freak, descriptorsB_Freak;vector<DMatch> matches_Freak;// DETECTION// Any openCV detector such asSurfFeatureDetector detector_Freak(200, 4);// DESCRIPTOR// Our proposed FREAK descriptor// (roation invariance, scale invariance, pattern radius corresponding to SMALLEST_KP_SIZE,// number of octaves, optional vector containing the selected pairs)// FREAK extractor(true, true, 22, 4, std::vector<int>());FREAK freak;// MATCHER// The standard Hamming distance can be used such as// BruteForceMatcher<Hamming> matcher;// or the proposed cascade of hamming distance using SSSE3BruteForceMatcher<HammingLUT> matcher_Freak;// detectdouble t = (double)getTickCount();detector_Freak.detect(imgA_Freak, keypointsA_Freak);detector_Freak.detect(imgB_Freak, keypointsB_Freak);t = ((double)getTickCount() - t)/getTickFrequency();cout << "FREAK detection time [s]: " << t/1.0 << endl;// extractt = (double)getTickCount();freak.compute(imgA_Freak, keypointsA_Freak, descriptorsA_Freak);freak.compute(imgB_Freak, keypointsB_Freak, descriptorsB_Freak);t = ((double)getTickCount() - t)/getTickFrequency();cout << "FREAK extraction time [s]: " << t << endl;// match
//  t = (double)getTickCount();matcher_Freak.match(descriptorsA_Freak, descriptorsB_Freak, matches_Freak);
//  t = ((double)getTickCount() - t)/getTickFrequency();
//  std::cout << "matching time [s]: " << t << std::endl;double max_dist = 0;double min_dist = 100;//-- Quick calculation of max and min distances between keypointsfor (int i=0; i<descriptorsA_Freak.rows; i++){ double dist = matches_Freak[i].distance;if (dist < min_dist) min_dist = dist;if(dist > max_dist) max_dist = dist;}printf("-- Max dist : %f \n", max_dist);printf("-- Min dist : %f \n", min_dist);//-- Draw only "good" matches (i.e. whose distance is less than 0.7*max_dist )//-- PS.- radiusMatch can also be used here.vector<DMatch> good_matches_Freak;for (int i=0; i<descriptorsA_Freak.rows; i++){ if(matches_Freak[i].distance < 0.7*max_dist){ good_matches_Freak.push_back(matches_Freak[i]); }}// Draw matchesMat imgMatch_Freak;drawMatches(imgA_Freak, keypointsA_Freak, imgB_Freak, keypointsB_Freak, good_matches_Freak, imgMatch_Freak,Scalar::all(-1), Scalar::all(-1),vector<char>(), DrawMatchesFlags::NOT_DRAW_SINGLE_POINTS);// displayimshow("matchFREAK", imgMatch_Freak);waitKey(0);return 0;
}

图像局部特征(十三)--FREAK特征相关推荐

  1. 图像特征之SURF特征匹配

    原文站点:https://senitco.github.io/2017/06/27/image-feature-surf/   加速鲁棒特征(Speed Up Robust Feature, SURF ...

  2. 局部特征(3)——SURF特征总结

    局部特征系列: 局部特征(1)--入门篇 局部特征(2)--Harris角点 局部特征(3)--SURF特征总结 局部特征(4)--SIFT和SURF的比较 局部特征(5)--如何利用彩色信息 Col ...

  3. 图像局部显著性—点特征(GLOH)

    基于古老的Marr视觉理论,视觉识别和场景重建的基础即第一阶段为局部显著性探测.探测到的主要特征为直觉上可刺激底层视觉的局部显著性--特征点.特征线.特征块. 相关介绍:局部特征显著性-点特征(SIF ...

  4. 图像局部特征(八)--斑点检测子SIFT/SURF区别总结

    原文: http://blog.csdn.net/cy513/article/details/4414352 http://blog.csdn.net/jwh_bupt/article/details ...

  5. halcon边缘提取颜色相近_初学者福利!三种用Python从图像数据中提取特征的技术...

    全文共4073字,预计学习时长8分钟 你之前是否使用过图像数据?也许你想建立自己的物体检测模型,或者仅仅是想统计走进某栋建筑物的人数,使用计算机视觉技术处理图像拥有无穷无尽的可能性. 但数据科学家最近 ...

  6. 图像局部特征(十)--BRIEF描述子

     原文: http://www.cnblogs.com/ronny/p/4081362.html Binary Robust Independent Elementary Features www ...

  7. 图像局部显著性—点特征(FREAK)

    参考文章:Freak特征提取算法  圆形区域分割 一.Brisk特征的计算过程(参考对比): 1.建立尺度空间:产生8层Octive层. 2.特征点检测:对这8张图进行FAST9-16角点检测,得到具 ...

  8. 图像局部特征(十二)--BRISK特征

    原文: http://www.mamicode.com/info-detail-940675.html 简介 BRISK算法是2011年ICCV上<BRISK:Binary Robust Inv ...

  9. 图像局部特征(十四)--MSER特征

    原文: http://blog.csdn.net/zhaocj/article/details/40742191 最大稳定极值区域(MSER-Maximally Stable Extremal Reg ...

最新文章

  1. chrome 浏览器打开静态html 获取json文件失败 解决方法
  2. 揭秘 ClownFish 比手写代码还快的原因
  3. mysql DATE_FORMAT 年月日时分秒格式化
  4. 突发:ORA-12541:TNS:无监听程序 的调查解决方法(监听日志已满导致)
  5. 杭州线下|2019产品经理年终轰趴
  6. Mongodb副本集--Out of memory: Kill process 37325 (mongod)
  7. 极光推送 api ios参数问题
  8. Qt利用setStyleSheet设置样式
  9. Java并发编程之ReentrantLock重入锁
  10. 【CNN】很细的讲解什么以及为什么是卷积(Convolution)!
  11. 《maven的学习》 尚硅谷Maven视频(maven零基础入门)B站
  12. python三维雷达图_Matplotlib绘制雷达图和三维图的示例代码
  13. Java 案例:珠穆朗玛峰的高度
  14. arduino esp32 读福申甲醛传感器
  15. 京东/淘宝客服对话数据公开,seq2seq生成模型设计对话系统获第二名!
  16. 自己实现Latex公式识别
  17. 什么是抽象方法 java_java抽象类和抽象方法
  18. HTTPS加密网站,地址重写配置
  19. android 盈利模式
  20. 工作站(集群)使用说明及相关工具

热门文章

  1. Linux 中断学习之前言篇---中断之原理篇
  2. IOS硬件解码VTDecompressionSession失效
  3. linux-清除登录系统成功记录的命令
  4. DBeaver连接mysql驱动下载失败怎么办?
  5. python string转date类型_java string类型怎么转化成date类型
  6. Ubuntu硬盘的挂载(临时、永久挂载)
  7. mysql和oracle 命令行执行sql文件 数据库执行sql文件 执行sql语句
  8. python利用什么写模板_利用python自动生成verilog模块例化模板
  9. andriod studio获取root_怎样获得root权限
  10. 循环输出26个字母C语言,菜鸟求助,写一个随机输出26个英文字母的程序