介绍:

  • 做边缘检测(edge detection)的网络,实质上来讲,应该算是HED网络的改进
  • 作者提出RCF,将所有卷积特征封装成更具鉴别性的表示,很好地利用了丰富的特征层次结构,并且可以通过反向传播进行训练
  • 在BSDS500上实现SOTA结果,0.811的ODS F-measure和8fps,快速版的可以实现0.806和30fps
  • 边缘检测是计算机视觉中的一个核心低级问题
  • 传统的边缘检测方法先是提取图像的颜色、纹理、亮度或梯度等,然后使用复杂的学习范式对边缘和非边缘的像素进行分类
  • 低级信息在语义上具有重要作用,但很难表示高级信息(表示用于语义有意义的边缘检测的高级信息),CNNs,就正好有自动学习自然图像高级信息表示的能力,用它来进行边缘检测,是一种趋势
  • 然而,以前的CNN体系结构只使用最终的Conv层或神经网络池层之前的层,而忽略中间层
  • RCF的提出,是基于,以上两点和,深度网络容易导致梯度爆炸和梯度消失问题【可以继续考虑】,提出可以充分利用CNN所有层的特征,来进行像素级预测

相关工作:

  • 传统方法有Pb,gPb,SE等,CNN方法有N4-Fields、DeepContour、HED、HED的改进等
  • 这些都缺乏CNN的充分利用,只在最后一个阶段进行

RCF:

  • VGG作为主干网络,每个卷积层捕获的有用信息随着感受野大小的增加而变得更粗糙(以下5条是论文中对网络架构的介绍
  • 提出RCF,切断了所有全连接层、池化层第5层,切除全连接层是为了使用全卷积层,实现image-to-image的预测,加入pool5层会使步幅增加两倍,这通常会导致边缘定位的退化
  • VGG16中每个阶段中的每个卷积层都连接到核大小为1×1和通道深度为21的卷积层。每个阶段的特征映射都是用一个eltwise层(相加)来积累的,以获得混合特征。
  • 一个1×1个卷积层跟随每个eltwise层。然后,使用一个反卷积层对这个特征映射进行上采样。
  • 在每个阶段,交叉熵损失/Sigmoid连接到上采样层。
  • 所有上采样层都是级联的。 然后使用1×1卷积从每个阶段融合特征映射。 最后,采用交叉熵损失/Sigmoid得到融合损失/输出
  • RCF提供了一种比现有机制更好的机制来学习来自各级卷积特征的多尺度信息,作者认为这些特征都与边缘检测有关
  • 在RCF中,高级特征较粗,可以在较大的对象或对象部分边界处获得强响应。
  • 提出的新的损失函数是这个
  • 相比HED,RCF一是捕捉了所有conv的特征进行融合得到最终的结果,二是提出新的损失函数,三是提出多尺度测试

实验

  • 评价方法。得到一个边缘可能性图(edge probability map),需要一个阈值来得到二值边缘图(binary edge map),有两种方式来设置这个阈值,一种ODS(optimal dataset scale)即固定的阈值,使得整个数据集的F-score最大,另一种是OIS(optimal image scale),每一张图片,选取不同的阈值,使得F-score最大。作者采用的就是ODS和OIS两种方法进行评价的

接下来是实验得到的一些结果图





相关资料

1.BSDS500数据集
2.代码实现
3.pytorch版本的代码实现
4.论文

Richer Convolutional Features for Edge Detection(RCF论文学习笔记)相关推荐

  1. 论文见解之RCF:Richer Convolutional Features for Edge Detection

    论文名:Richer Convolutional Features for Edge Detection code:https://github.com/yun-liu/rcf 这是cvpr2017的 ...

  2. Richer Convolutional Features for Edge Detection 论文阅读

    Richer Convolutional Features for Edge Detection是2017年cvpr中一篇边缘检测文章,准备以此为基础,1)了解深度学习中边缘检测的发展:2)如何使用深 ...

  3. CNN边缘检测--Richer Convolutional Features for Edge Detection

    Richer Convolutional Features for Edge Detection CVPR2017 Caffe:https://github.com/yun-liu/rcf 本文针对边 ...

  4. 边缘检测:更丰富的卷积特征 Richer Convolutional Features for Edge Detection

    边缘检测:更丰富的卷积特征 Richer Convolutional Features for Edge Detection Source code and paper address Abstrac ...

  5. (Pytorch)环境配置与代码学习1—边缘检测:更丰富的卷积特征 Richer Convolutional Features for Edge Detection

    (Pytorch)环境配置与代码学习1 - 边缘检测:更丰富的卷积特征 Richer Convolutional Features for Edge Detection Source code and ...

  6. 【边缘检测】RCF: Richer Convolutional Features for Edge Detection

    文章目录 一.背景 二.网络结构 三.和 HED[16] 的不同 一.背景 边缘检测是视觉任务中非常基础的任务,现有的基于CNN的边缘检测方法有两个明显的问题: 现有的方法大多只使用CNN的最后一层c ...

  7. Richer Convolutional Features for Edge Detection(RCF-PYTorch)部署

    一.部署环境 1.ubuntu18.04 2.anaconda 3.pytorch1.7 二.源代码 本次部署代码地址:https://github.com/meteorshowers/RCF-pyt ...

  8. 基于深度学习的CNN边缘检测RCF--Richer Convolutional Features for Edge Detection

    Richer Convolutional Features for Edge Detection CVPR2017 Caffe:https://github.com/yun-liu/rcf 本文针对边 ...

  9. 轮廓检测_轮廓检测| Richer Convolutional Features | CVPR | 2017

    0 概述 论文名称:"Richer Convolutional Features for Edge Detection" 论文链接:https://openaccess.thecv ...

最新文章

  1. PHP消息队列httpsqs安装与使用无错版
  2. 如何养成一个习惯(持续更新)
  3. 输入参数的数目不足_机器学习算法—KMEANS算法原理及阿里云PAI平台算法模块参数说明...
  4. java如何识别tiled地图_Egret学习-TiledMap使用
  5. form表单用js提前执行函数若不成功则不提交_面试必会的重复提交 8 种解决方案!...
  6. python多线程教程_Python多线程编程教程【2小时学会】
  7. linux bash技巧_Bash提示技巧和窍门
  8. centos6.8自带mysql_CentOS6.8下MySQL数据库版本信息查看
  9. NGINX 实现反向代理负载均衡服务器
  10. 云计算的发展趋势_云计算的未来发展趋势
  11. 线程编程(thread programming)介绍
  12. Kaggle信用卡欺诈数据
  13. 零成本学arduino教程——光敏电阻传感器
  14. ubuntu18.04安装中文输入法ibus
  15. 自抗扰控制(ADRC)—— 扩展状态观测器
  16. HTML流式布局是什么,什么是流式布局?流式布局是什么意思?
  17. python群发邮箱软件下载_python qq邮件群发
  18. uniapp h5微信分享
  19. 关于html的表情包,HTML那些可愛的“表情包”
  20. 《游戏学习》| 射击类小游戏 html5 打野鸭子

热门文章

  1. 两个高斯分布乘积的理论推导
  2. 经典排序算法之:堆排序
  3. php 搜索引擎 分词_PHP使用elasticsearch搜索安装及分词方法
  4. 身份证号码验证——C语小程序言
  5. 免费的mysql云平台_免费的mysql云服务器
  6. Appium+python自动化(三十八) - Appium自动化测试框架综合实践 - 框架简介-助你冲击高薪,迎娶白富美(超详解)...
  7. 简析JavaScript 事件绑定、事件冒泡、事件捕获和事件执行顺序
  8. 网工笔记(三):IP Multicast组播技术
  9. 聚焦:ZK-SNARK 技术
  10. 生产环境突然编译报错:‘XXXX‘ is not defined no-undef