源自视觉神经原理的卷积神经网络简介

基于人们对于生物视觉的研究，科学家们给出了在计算机视觉中的具备良好表现的卷积神经网络模型。

卷积神经网络发展概况

1.在这个结构中可以使用反向传播来训练权重。

2.Yann LeCun et al在1989年首次展示手写数字识别。

3.Krizhevsky，Sutskever & Hinton在2012年展示了ImageNet竞赛中图像分类上的有效性。

4.Girshick，Donahue，Darrell & Malik（arxiv，2013）（CVPR 2014）展示卷积网络对于目标检测同样可行。

5……

LeNet 1989

最早的卷积神经网络的模型

卷积操作：卷积窗口的大小需要指定
池化操作：
特征图：
构成卷积神经网络的基础

全连接VS局部连接

全连接

某一层的某一个结点，要和上一层所有的结点都有连接。

局部连接

卷积是局部化的连接方式，也就是说某一层的某一个结点跟前一层之间的连接不是全部，而是针对一个小窗口。

网络连接结构

卷积——>池化——>循环——>累加===》网络连接结构

卷积网络深入理解

Convolution

卷积的输入通常是针对一个图像来说的，是一个二维的结构输入单元。
卷积的时候是将一个局部感知野的内容信息合到一个hidden neuron过程。
通过这样的方式汇集视觉的信息内容。

神经元对一个指定大小的窗口的内容抽取到第一个隐藏层的第一个单元的位置上。
可以使用stride length控制移动像素大小。

共享权重

使用一个指定大小的窗口去扫动整个图片的时候，对应的链接是同样的权重。

特征图 Feature map

池化 Pooling

max-pooling units：找出最大值输出到下一层。
L1 pooling：取激活值的平方和的平方根。

PaddlePaddle训练营——公开课——AI核心技术掌握——第2章机器能“看”的现代技术——源自视觉神经原理的卷积网络简介及深入理解相关推荐

PaddlePaddle训练营——公开课——AI核心技术掌握——第2章机器能“看”的现代技术
计算机视觉 Computer Vision 计算机视觉的不同视角 1.人类对图像感知的研究. 2.理解视网膜和大脑内在生物上的机制. 3.物理光学.统计学的解释. 计算机视觉的深度学习模型 Image ...
PaddlePaddle训练营——公开课——AI核心技术掌握——第1章迈入现代人工智能的大门——深度学习简介
Artificial Intelligence Logic-based AI,也称为符号主义AI,能够解决良定义的逻辑问题well defined logical problems比如国际象棋. 但对 ...
PaddlePaddle训练营——公开课——AI核心技术掌握——第1章迈入现代人工智能的大门——Modern AI骨架脉络
1.神经网络与深度学习的基本概念 1.MLP 2.现代DNN 3.PaddlePaddle实现对应的算法 2.卷积神经网络原理.模型及应用(计算机视觉) 1.CNN 2.AlexNet 3.VGG 4 ...
PaddlePaddle训练营——公开课——AI核心技术掌握——第1章迈入现代人工智能的大门——深度学习的基础算法——反向传播算法简介
反向传播算法 Back Propagation Algorithms 在一个链接上的权重的变化会使得下一个神经元获得的值就有相应的变化,这个变化量会随着网络的前向传播影响到下一层的每一个神经元,以此类 ...
PaddlePaddle训练营——公开课——AI核心技术掌握——第1章迈入现代人工智能的大门——多层感知机网络模型
多层感知机 Multilayer perceptron 感知机 Perceptron 激活函数 Activation function 常见的激活函数多层感知机 Multilayer percept ...
华为销售LTC/研发IPD/服务ITR流程变革之道与启发训练营公开课！|6月11~12日海口
"管理就是抓住三件事:客户.流程.绩效.企业管理归根结底就是流程的管理,而流程本质实要把成功实践经验及失败教训,想方设法落实固化成为运作流程,使得公司成功不再依赖个人经验而是依靠组织能力&q ...
公开课报名 | 基于自定义模板的OCR结果的结构化处理技术
随着行业的发展和技术的成熟,文字识别(OCR)目前已经应用到了多个行业中,比如物流行业快递包裹的分拣,金融行业的支票单据识别输入,交通领域中的车牌识别,以及日常生活中的卡证.票据识别等等.OCR(文字 ...
免费公开课 | AI对抗攻防系列专题，今晚7点第一讲
精选6讲针对人脸识别的AI对抗专题课,搭配实战项目演练,完成项目作业即可获得完课奖品近年来,AI安全问题愈加受到行业关注.在今年6月的智源大会上,清华大学计算机系教授.RealAI 首席科学家朱军就 ...
java监听焦点事件_【Java Swing公开课|Java Swing焦点事件监听器怎么用，看完这篇文章你一定就会了】- 环球网校...
[摘要]作为一门面向对象编程语言,Java吸收了C++语言的优点,也展现了其强大的一面,我们能在各个地方看到其功能强大和简单易用的两个特征,当然,也吸引了很多程序员的注意力,所以就有人想了解Java的 ...

PaddlePaddle训练营——公开课——AI核心技术掌握——第2章机器能“看”的现代技术——源自视觉神经原理的卷积网络简介及深入理解