点击上方“小白学视觉”，选择加"星标"或“置顶”

重磅干货，第一时间送达

译者|Arno

当我们说卷积神经网络（CNN）时，通常是指用于图像分类的2维CNN。但是，现实世界中还使用了其他两种类型的卷积神经网络，即1维CNN和3维CNN。在本指南中，我们将介绍1D和3D CNN及其在现实世界中的应用。我假设你已经大体上熟悉卷积网络的概念。

2维CNN | Conv2D

这是在Lenet-5架构中首次引入的标准卷积神经网络。Conv2D通常用于图像数据。之所以称其为2维CNN，是因为核在数据上沿2维滑动，如下图所示。

使用CNN的整体优势在于，它可以使用其核从数据中提取空间特征，而其他网络则无法做到。例如，CNN可以检测图像中的边缘，颜色分布等，这使得这些网络在图像分类和包含空间属性的其他类似数据中非常强大。

以下是在keras中添加Conv2D图层的代码。

import kerasfrom keras.layers import Conv2Dmodel = keras.models.Sequential()model.add(Conv2D(1, kernel_size=(3,3), input_shape = (128, 128, 3)))model.summary()

参数input_shape（128、128、3）表示图像的（高度，宽度，深度）。参数kernel_size（3，3）表示核的（高度，宽度），并且核深度将与图像的深度相同。

1维CNN | Conv1D

在介绍Conv1D之前，让我给你一个提示。在Conv1D中，核沿一维滑动。现在让我们考虑哪种类型的数据只需要核在一个维度上滑动并具有空间特性？

答案就是时间序列数据。让我们看一下以下数据。

该数据是从人戴在手臂上的加速度计中收集的。数据表示所有三个轴的加速度。1维CNN可以根据加速度计数据执行活动识别任务，例如人是站着，行走，跳跃等。此数据有2个维度。第一维是时间步长，另外一个是3个轴上的加速度值。

下图说明了核如何在加速度计数据上移动。每行代表某个轴的时间序列加速度。核只能沿时间轴一维移动。

以下是在keras中添加Conv1D图层的代码。

import kerasfrom keras.layers import Conv1Dmodel = keras.models.Sequential()model.add(Conv1D(1, kernel_size=5, input_shape = (120, 3)))model.summary()

参数input_shape（120，3）表示120个时间步骤，每个时间步骤中有3个数据点。这3个数据点是x，y和z轴的加速度。参数kernel_size为5，表示核的宽度，核高度将与每个时间步骤中的数据点数相同。

同样，1维CNN也可用于音频和文本数据，因为我们还可以将声音和文本表示为时间序列数据。请参考下图

Conv1D广泛应用于感官数据，加速度计数据就是其中之一。

3维CNN | Conv3D

在Conv3D中，核按3个维度滑动，如下所示。让我们再想想哪种数据类型需要核在3维上移动？

Conv3D主要用于3D图像数据。例如磁共振成像（MRI）数据。MRI数据被广泛用于检查大脑，脊髓，内部器官等。计算机断层扫描（CT）扫描也是3D数据的示例，它是通过组合从身体周围不同角度拍摄的一系列X射线图像而创建的。我们可以使用Conv3D对该医学数据进行分类或从中提取特征。

以下是在keras中添加Conv3D层的代码。

import kerasfrom keras.layers import Conv3Dmodel = keras.models.Sequential()model.add(Conv3D(1, kernel_size=(3,3,3), input_shape = (128, 128, 128, 3)))model.summary()

这里参数Input_shape（128，128，128，3）有4个维度。3D图像也是4维数据，其中第四维代表颜色通道的数量。就像平面2D图像具有3维一样，其中3维代表色彩通道。参数kernel_size（3,3,3）表示核的（高度，宽度，深度），并且核的第4维与颜色通道相同。

总结

• 在1D CNN中，核沿1个方向移动。一维CNN的输入和输出数据是二维的。主要用于时间序列数据。

• 在2D CNN中，核沿2个方向移动。2D CNN的输入和输出数据是3维的。主要用于图像数据。

• 在3D CNN中，核沿3个方向移动。3D CNN的输入和输出数据是4维的。通常用于3D图像数据（MRI，CT扫描）。

下载1：OpenCV-Contrib扩展模块中文版教程

在「小白学视觉」公众号后台回复：扩展模块中文教程，即可下载全网第一份OpenCV扩展模块教程中文版，涵盖扩展模块安装、SFM算法、立体视觉、目标跟踪、生物视觉、超分辨率处理等二十多章内容。

下载2：Python视觉实战项目52讲

在「小白学视觉」公众号后台回复：Python视觉实战项目，即可下载包括图像分割、口罩检测、车道线检测、车辆计数、添加眼线、车牌识别、字符识别、情绪检测、文本内容提取、面部识别等31个视觉实战项目，助力快速学校计算机视觉。

下载3：OpenCV实战项目20讲

在「小白学视觉」公众号后台回复：OpenCV实战项目20讲，即可下载含有20个基于OpenCV实现20个实战项目，实现OpenCV学习进阶。

交流群

欢迎加入公众号读者群一起和同行交流，目前有SLAM、三维视觉、传感器、自动驾驶、计算摄影、检测、分割、识别、医学影像、GAN、算法竞赛等微信群（以后会逐渐细分），请扫描下面微信号加群，备注：”昵称+学校/公司+研究方向“，例如：”张三 + 上海交大 + 视觉SLAM“。请按照格式备注，否则不予通过。添加成功后会根据研究方向邀请进入相关微信群。请勿在群内发送广告，否则会请出群，谢谢理解~