膨胀卷积--Multi-scale context aggregation by dilated convolutions

Multi-scale context aggregation by dilated convolutions
ICLR 2016

https://arxiv.org/abs/1511.07122

Code:
https://github.com/fyu/dilation
https://github.com/bordesf/dilation

针对语义分割问题 semantic segmentation，这里使用 dilated convolutions 得到multi-scale context 信息来提升分割效果。

dilated convolutions：

首先来看看膨胀卷积 dilated convolutions ，

图（a）:就是一个常规的 3*3 卷积，1-dilated convolution 得到 F1， F1的每个位置的 receptive field 是 3×3
图（b）: 在 F1的基础上，进行一个2-dilated convolution，注意它的点乘位置，不是相邻的3*3，得到了 F2，
F2的每个位置的 receptive field 是 7×7
图（c）:在 F2的基础上，进行一个 4-dilated convolution，得到了 F3，
F3的每个位置的 receptive field 是 15×15

注意这里 dilated convolution 的参数数量是相同的，都是 3*3=9

Multi-scale context aggregation：

The basic context module has 7 layers that apply 3×3 convolutions with different dilation factors. The dilations are 1, 1, 2, 4, 8, 16, and 1。
这里主要通过不同的 different dilation factors 得到 multi-scale context。

注意这里的 context module 参数初始化是有讲究的。

FRONT END：

这里我们使用 VGG-16 network用于 dense prediction and removed the last two pooling and striding layers，后面应该是加上 context module

膨胀卷积--Multi-scale context aggregation by dilated convolutions相关推荐

【Dilated Conv】《Multi-Scale Context Aggregation by Dilated Convolutions》
ICLR-2016 文章目录 1 Background and Motivation 2 Advantages / Contributions 3 Method 3.1 Dilated Convolu ...
Multi-Scale Context Aggregation By Dilated Convolutions
1 Introduction 之前的网络比如FCN或者Deep Lab v1都存在从小的分辨率图像往大了进行上采样,那么问题就来了,下采样是必要的嘛?话有一些方法提供多个重构版本(multiple r ...
【语义分割专题】语义分割相关工作--Multi-Scale Context Aggregation by Dilated Convolution
Multi-Scale Context Aggregation by Dilated Convolution Yu, Fisher and Vladlen Koltun. "Multi-Sc ...
Multi-Scale Context Aggregation by Dilated Convolution 对空洞卷积（扩张卷积）、感受野的理解
dilated convolution是针对图像语义分割问题中下采样会降低图像分辨率.丢失信息而提出的一种卷积思路. 在基于FCN思想的语义分割问题中,输出图像的size要和输入图像的size一致.但 ...
DL之DilatedConvolutions：Dilated Convolutions(膨胀卷积/扩张卷积)算法的简介(论文介绍)、架构详解、案例应用等配图集合之详细攻略
DL之DilatedConvolutions:Dilated Convolutions(膨胀卷积/扩张卷积)算法的简介(论文介绍).架构详解.案例应用等配图集合之详细攻略目录 Dilated Con ...
膨胀卷积（Dilated convolution）
Dilated conv,中文叫做空洞卷积或者扩张卷积,起源于语义分割,大部分文章也用于语义分割,具体能否对其他应用有价值姑且还不知道,但确实是一个不错的探究方向. 感受野(receptive fie ...
膨胀卷积（Dilated convolutions）（又叫空洞卷积、扩张卷积）
一.背景论文:Multi-Scale Context Aggregation by Dilated Convolutions 大部分图像分割的框架都是经历一系列的卷积和下采样的模块之后,再不断与 ...
膨胀卷积(DILATED CONVOLUTIONS)
膨胀卷积(DILATED CONVOLUTIONS)是在卷积核的元素之间插入一些额外的空间,而插入空间的量由参数膨胀因子d (dilation rate)来控制, 通常有d-1个空间在卷积核元素之间被 ...
Dilated Convolution膨胀卷积感受野详解
重温Dilated Convolution膨胀卷积,对论文<MULTI-SCALE CONTEXT AGGREGATION BY DILATED CONVOLUTIONS>中采用Dilat ...

膨胀卷积--Multi-scale context aggregation by dilated convolutions

膨胀卷积--Multi-scale context aggregation by dilated convolutions相关推荐

最新文章

热门文章