channel shuffle通道洗牌

一般的卷积是在所有的输入特征图上做卷积，可以说是全通道卷积，是一种通道密集连接方式（channel dense connection）；

分组卷积（Group convolution）是将输入层的不同特征图进行分组，然后采用不同的卷积核再对各个组进行卷积，这样可以降低卷积的计算量，但不利于通道组之间的信息流通，因此，与常规卷积相比，分组卷积是一种通道稀疏连接方式；

为了克服分组卷积带来的副作用，ShuffleNet v1 中提出了channel shuffle操作：对group convolution之后的特征图进行“重组”，这样可以保证下一步group convolution的输入来自不同的组，因此信息可以在不同组之间流转。

其实就是打乱原有特征顺序再进行重组：首先确定自己的特征图通道数多少，再确定组数多少，然后将通道分组后作为输入（input）就可以了。
在程序上实现channel shuffle流程：
假定将输入层分为 g 组，总通道数为 g × n ：

import torch
def channel_shuffle(x, groups):batch_size, num_channels, height, width = x.size()channels_per_group = num_channels // groupsprint(channels_per_group)# reshape# b, c, h, w =======>  b, g, c_per, h, wx = x.view(batch_size, groups, channels_per_group, height, width)x = torch.transpose(x, 1, 2).contiguous()# flattenx = x.view(batch_size, -1, height, width)return xa = torch.randn(1,15,3,3) #1x15x3x3
print(a.shape)
groups = 3
x = channel_shuffle(a, 3)
print(x.shape)

channel shuffle通道洗牌相关推荐

shuffle算法c语言,C#Shuffle算法(洗牌算法、抽样算法)
Fisher-Yates Shuffle算法 1.创建一个新的list 2.随机取出当前0-list.Count其中一个数 3.把老list当前随机数位置添加到新list 4.老list删除这个数 5 ...
这或许是讲解Knuth（Shuffle）洗牌算法最好的文章
1. 前言看问题,洗牌,显然是一个随机算法了.随机算法还不简单?随机呗.把所有牌放到一个数组中,每次取两张牌交换位置,随机 k 次即可. 如果你的答案是这样,通常面试官会进一步问一下,k 应该取多少 ...
js打乱数组内元素顺序(Fisher–Yates shuffle洗牌算法)
如何将数组内元素顺序打乱呢?这里小shy向大家介绍一种算法. Fisher–Yates shuffle:洗牌算法. 通俗理解: 先将数组最后一位元素作为参考点,将这个参考点和数组其他位置的元素(使用随 ...
随机洗牌算法之Knuth-Durstenfeld Shuffle
问题设计一个公平的洗牌算法问题分解首先,必然明确这是一个随机算法其次,要考虑公平问题剖析关于随机看到随机我们大多数时候想起来的是,把所有的数都放到一个数组里,每次取两个数进行交换,随机 ...
Channel Shuffle类
ShuffleNet 中引入了 channel shuffle, 用来进行不同分组的特征之间的信息流动, 以提高性能.而Detectron2使用的pytorch版本一般较低,没有channel shu ...
洗牌、发牌算法 (打乱扑克牌顺序)
#include <stdio.h> #include <stdlib.h> #include <time.h> int d[6]; int i,n,a,b ...
R语言构造扑克牌自动发牌，洗牌
在R语言构建自动洗牌,发牌要求:自动洗牌.发牌任务一:创建一副牌.学会如何使用R的数据类型和数据结构. 任务二:编写发牌和洗牌的函数.学习从一个数据集中抽取想要的数值. 首先需要创建一副牌(不包括 ...
Unity | 三种洗牌算法
拓展资料:C#Shuffle算法(洗牌算法.抽样算法) - 简书代码: using System.Collections.Generic; using UnityEngine;/** * Write ...
python实现洗牌算法_洗牌算法及 random 中 shuffle 方法和 sample 方法浅析
对于算法书买了一本又一本却没一本读完超过 10%,Leetcode 刷题从来没坚持超过 3 天的我来说,算法能力真的是渣渣.但是,今天决定写一篇跟算法有关的文章.起因是读了吴师兄的文章 <扫雷与 ...

channel shuffle通道洗牌

channel shuffle通道洗牌相关推荐

最新文章

热门文章