对象分割--Instance-sensitive Fully Convolutional Networks

Instance-sensitive Fully Convolutional Networks
ECCV2016

Instance-sensitive 这里是什么意思了， FCN 语义分割对同一类型的对象是不区分的，Instance-sensitive 就是区分同一类型的对象。

上图 c 就是 semantic segmentation， d 是 instance segmentation

本文是在 FCN 的基础上将同一类型的对象区分开来，即修改 FCN 的框架使其可以完成 instance segmentation

3 Instance-sensitive FCNs for Segment Proposal
3.1 From FCN to Instance FCN
当图像只有一个对象时，FCN 的结果就是 instance segmentation
当图像有两个相近的同类型对象时，怎么让FCN完成 instance segmentation了？如果对于两个相近同类型对象的相近区域，where one object is conjunct the other，如果我们能够区分谁是 left instance的右边，谁是 right instance 的左边，那么我们就可以用 FCN-like score maps 得到 instances

有没有 DPM Deformable Part Models 的意思，就是使用部件组成一个对象，这样就可以将对象区分开来。

Instance-sensitive score maps
这里我们在 FCN 中引入 relative positions 信息，原始FCN 中每个输出像素是 a classifier of an object category，本文的FCN 每个输出像素是 a classifier of relative positions of instances

original FCN [1] where each output pixel is a classifier of an object category, we propose an FCN where each output pixel is a classifier of relative positions of instances.

instance-sensitive score maps

Instance assembling module
这个模块就是将各个部件组合起来构成一个 instance

整个系统如下图所示：

这里用一个小网络得到 objectness score，用于过滤 instances，得到 highly scored output instances

本文主要和 deep mask 做对比：

该方法的问题：
1）对象尺寸问题，需要对多尺度图像进行处理
Only a fixed-size square sliding window is used.
The network is applied on multi-scale images to find object instances of different sizes.

2）对象类别问题，需要再对对象进行分类得到类别信息
The approach is blind to the object categories. Only a separate “objectness” classifica-
tion sub-network is used to categorize the window as object or background. For the instance-aware semantic segmentation task, a separate downstream network is used to further classify the mask proposals into object categories

对象分割--Instance-sensitive Fully Convolutional Networks相关推荐

论文笔记（FCN网络，语义分割）：Fully Convolutional Networks for Semantic Segmentation
FCN论文笔记:Fully Convolutional Networks for Semantic Segmentation 语义分割模型结构时序: FCN SegNet Dilated Convol ...
【论文翻译】Fully Convolutional Networks for Semantic Segmentation
论文题目:Fully Convolutional Networks for Semantic Segmentation 论文来源:Fully Convolutional Networks for Se ...
彻底讲透FCN语义分割开山之作Fully Convolutional Networks
FCN论文标题:Fully Convolutional Networks for Semantic Segmentation 论文下载地址:https://arxiv.org/abs/1411.40 ...
【语义分割】全卷积网络（Fully Convolutional Networks, FCN）详解
论文题目:<Fully Convolutional Networks for Semantic Segmentation> 论文地址:https://arxiv.org/abs/1411. ...
Fully Convolutional Networks for Semantic Segmentation (FCN)论文翻译和理解
论文题目:Fully Convolutional Networks for Semantic Segmentation 论文来源:Fully Convolutional Networks for Se ...
【论文翻译】Fully Convolutional Networks for Semantic Segmentation_2
论文题目:Fully Convolutional Networks for Semantic Segmentation 论文来源:Fully Convolutional Networks for Se ...
Fully Convolutional Networks
文章目录基本概念网络结构全卷积网络反卷积层跳级(skip)结构模型训练 FCN是深度学习应用在图像分割的代表作, 是一种端到端(end to end)的图像分割方法, 让网络做像素级别的预 ...
【FCN】Fully Convolutional Networks for Semantic Segmentation学习
论文翻译又是一个看不懂原文,又看不懂翻译的论文. semantic segmentation 图像语义分割就是预测每个像素所属的对象类别语义分割是指像素级地识别图像,即标注出图像中每个像素所属的 ...
【论文阅读】Fully Convolutional Networks for Semantic Segmentation【CVPR,PAMI】
摘要我们的研究表明,卷积网络通过端到端.像素到像素的训练,在语义分割方面比之前的最佳结果有所提高我们的关键见解是构建完全卷积网络,它接受任意大小的输入,并产生相应大小的输出,并具有有效的推理和学习 ...

对象分割--Instance-sensitive Fully Convolutional Networks

对象分割--Instance-sensitive Fully Convolutional Networks相关推荐

最新文章

热门文章