Not All Pixels Are Equal: Difficulty-Aware Semantic Segmentation via Deep Layer Cascade

CVPR2017

本文针对语义分割问题,引入Cascade思想,将图像像素根据分割难易度分为三个等级:Easy、Moderate、Hard ,分别用CNN网络的浅层、中层、高层完成分割。降低运算量同时提高分割精度


上图显示实际图像中的像素分割难易度是不一样的。Easy 和 Moderate 等级的占绝大多数,hard 占少数

本文的 contributions:
1)本文算法是第一个使用深度模型来区分对待分割像素难易度的算法,本文提出的 Deep Layer Cascade (LC) 降低运算量提高分割精度
2) LC 可以很容易嵌入到其他深度模型中,对 Inception-ResNet-v2 (IRNet) 应用 LC后,速度提高42.8% ,精度提高1.7%
3) LC 和其他一些网络结构的联系被明确指出。大量实验验证了LC的有效性

本文以 Inception-ResNet-v2 为例,将 LC 嵌入到此模型中。

上图(a)是 Inception-ResNet-v2 ( IRNet)网络模块示意图,(b)是 IRNet after LC,其中 L1 对应简单难度像素分割结果,L2对应中等难度像素分割结果,L3 对应高等难度像素分割结果

L2 只对 L1 不是很确定的像素进行分割, L3 只对 L2 不是很确定的像素进行分割。这样可以明显降低运算量。具体是通过Region Convolution 来实现的。


M can be implemented as a binary mask, where the pixels inside M equal one, otherwise zero
M 是一个二值掩模图像。

最终的分割结果是将 L1, L2,L3 的结果综合起来。

VOC12 test set 和 Cityscapes test set 结果对比

语义分割--Not All Pixels Are Equal:Difficulty-Aware Semantic Segmentation via Deep Layer Cascade相关推荐

  1. CVPR2022自适应/语义分割:Class-Balanced Pixel-Level Self-Labeling for Domain Adaptive Semantic Segmentation

    CVPR2022自适应/语义分割:Class-Balanced Pixel-Level Self-Labeling for Domain Adaptive Semantic Segmentation用 ...

  2. 【语义分割】ICCV21_Mining Contextual Information Beyond Image for Semantic Segmentation

    文章目录 一.背景 二.动机 三.方法 3.1 整体结构 3.2 特征存储模块 Feature Memory Module 3.3 数据集层面的上下文聚合 Dataset-level Context ...

  3. 语义分割--(DFN)Learning a Discriminative Feature Network for Semantic Segmentation

    Learning a Discriminative Feature Network for Semantic Segmentation Learning a Discriminative Featur ...

  4. 语义分割--(DeepLabv3+)Encoder-Decoder with Atrous Separable Convolution for Semantic

    语义分割--(DeepLabv3+)Encoder-Decoder with Atrous Separable Convolution for Semantic .. https://blog.csd ...

  5. 【语义分割】ASPP:Rethinking Atrous Convolution for Semantic Image Segmentation

    文章目录 一.主要思想 二.实现 三.代码 一.主要思想 为了提高对不同尺度目标的语义分割,作者串联或并联使用不同扩张率的空洞卷积来实现对多尺度上下文的语义信息捕捉. Atrous Spatial P ...

  6. ICCV2019语义分割/UDA:ACE: Adapting to Changing Environments for Semantic SegmentationACE:适应变化环境下的语义分割

    ACE: Adapting to Changing Environments for Semantic Segmentation ACE:适应变化环境下的语义分割 0.摘要 1.概述 2.相关工作 2 ...

  7. 图像目标分割_2 FCN(Fully Convolutional Networks for Semantic Segmentation)

    6.2.1 FCN 背景介绍 图像语义分割:给定一张图片,对图片上每一个像素点进行分类!但是与图像分类目的不同,语义分割模型要具有像素级的密集预测能力才可以. 6.2.2 FCN介绍 6.2.2.1 ...

  8. 实时语义分割--ICNet for Real-Time Semantic Segmentation on High-Resolution Images

    ICNet for Real-Time Semantic Segmentation on High-Resolution Images https://hszhao.github.io/project ...

  9. 语义分割深度学习方法集锦

    转载:https://github.com/handong1587/handong1587.github.io/edit/master/_posts/deep_learning/2015-10-09- ...

最新文章

  1. Jquery基础:append、prepend、after、before、appendTo的区别
  2. SCVMM2008R2学习(八),硬件配置文件
  3. SQL SERVER 通用分页存储过程
  4. “12306” 的架构到底有多牛逼?
  5. SAP Spartacus支持的语言和货币单位的数据源
  6. 如何在C#中使用 ArrayPool,MemoryPool
  7. 「offer来了」浅谈前端面试中开发环境常考知识点
  8. css div撑满窗口高度_如何使用CSS将div的高度设置为窗口的100%?
  9. 2016.8-2017.1 六履带四摆臂移动机器人测控系统
  10. Json学习总结(6)——Fastjson远程代码执行漏洞
  11. 安装linux可是c盘文件夹失败,硬盘安装linux失败,进不去以前的windows怎么处理?
  12. 新的域名,新的空间,这里不再更新了。
  13. c++ 多线程_python要点-多线程
  14. atitit.团队建设总结fx O622
  15. 【Todo】已经打开的页面需要清掉的坑
  16. Windows下SQLMAP的安装图解
  17. 班迪录屏- Bandicam v4.5.6
  18. 制作席慕蓉的诗html,席慕容诗歌集
  19. 总结DH密钥协商(会话密钥)
  20. 手机您的浏览器不允许第三方_手机壁纸:我的世界不允许你的消失,不管结局是否完美...

热门文章

  1. Ubuntu 18.04 固件的烧录方法
  2. u-boot启动过程
  3. TensorFlow中Session.run和Tensor.eval的区别
  4. Windows下有关NDK的安装资料
  5. 研究生,导师不是你的保姆……
  6. 袁国勇院士团队纳米孔测序揭示人和禽流感病毒新型检测和监测靶点
  7. 扩增子统计绘图3热图:样品相关分析,差异OTU/ASV
  8. R语言ggplot2可视化分组的重叠图实战:grouped overlay plot
  9. pandas使用select_dtypes函数移除dataframe中指定数据类型的数据列(exclude columns based on the data type in dataframe)
  10. pandas使用pct_change计算数据列的百分比变化、环比变化率:计算当前元素和前一个元素之间的百分比变化、使用style函数指定format的格式:百分比、缺失值替换、用颜色标注极大值和极小值