人体姿态估计--Learning Feature Pyramids for Human Pose Estimation

Learning Feature Pyramids for Human Pose Estimation
ICCV2017
Torch： https://github.com/bearpaw/PyraNet

本文主要关注人体部件中的尺度问题， scale variations of human body parts，这种尺度变化主要发生在 camera view changes or severe foreshortening happens

提出的解决思路是 learning feature pyramids，设计了 Pyramid Residual Module (PRMs) 来增强 CNN 网络对尺度信息的提取能力。同时我们发现在 initialize the weights of multi-branch networks 存在问题以及 the problem of activation variance accumulation introduced by identity mapping may be harmful in some scenarios，对于这两个问题我们分别提出解决的方法。

3 Framework

3.1. Revisiting Stacked Hourglass Network

在每一个 stack hourglass” network 的末端我们加入了 intermediate supervision

3.2. Pyramid Residual Modules (PRMs)
这里我们设计了四个 PRMs 结构

我们的 PRM 可以作为 CNN 网络的一个基础模块，用于人体姿态估计或图像分类

4.1. Initialization Multi-Branch Networks

Existing weight initialization methods [33, 21, 24] are designed upon the assumption of a plain networks without branches
我们使用了 Multi-Branch Networks，所以现有的初始化策略不太适用，这里经过理论上的推导，我们得出的结论是：

the number of input branches and output branches should be taken into consideration when initializing parameters.

4.2. Output Variance Accumulation
identity mappings 的引入让我们的网络层数可以增加很多，但是同时也引入了问题：
identity mapping keeps increasing the variances of responses when the network goes deeper, which increases the difficulty of optimization

怎么解决这个问题了？使用 BN-ReLU-Conv block 替换 identity mappings

5 Experiments

注意使用和没使用 PRMs 的性能对比就是文献【39】和 Ours 的对比

用于图像分类

人体姿态估计--Learning Feature Pyramids for Human Pose Estimation相关推荐

姿态估计之2D人体姿态估计 - PifPaf:Composite Fields for Human Pose Estimation
参考: PifPaf: Composite Fields for Human Pose Estimation_MatthewHsw的博客-CSDN博客 OpenPifPaf: encoder过程_Ma ...
人体姿态估计技术的理解（Human Pose Estimination)
本人毕设题目是人体姿态估计技术的相关课题,本人按照自己对人体姿态估计技术的学习和理解进行论述,如有不足,请大家指正!!! 首先讨论一个问题:什么是姿态估计? "姿势估计?--姿势这个词对不同 ...
【人体姿态估计2】Real-time Multi-person 2d pose estimation using part affinity fields_2017
文章目录 1.Introduction 2.Method 2.1 Simultaneous Detection and Association 2.2 Confidence Maps for part ...
Human Pose Estimation人体姿态估计综述调研
给定一幅图像或一段视频,人体姿态估计就是去恢复其中人体关节点位置的过程. 数据集 LSP 地址:http://sam.johnson.io/research/lsp.htm 样本数:2K 关节点个数: ...
经典论文复现 | PyraNet：基于特征金字塔网络的人体姿态估计
过去几年发表于各大 AI 顶会论文提出的 400 多种算法中,公开算法代码的仅占 6%,其中三分之一的论文作者分享了测试数据,约 54% 的分享包含"伪代码".这是今年 AAAI ...
Human Pose Estimation姿态估计调研
介绍姿态估计的目标是在RGB图像或视频中描绘出人体的形状,这是一种多方面任务,其中包含了目标检测.姿态估计.分割等等.有些需要在非水平表面进行定位的应用可能也会用到姿态估计,例如图形.增强现实或者人 ...
记一次坎坷的算法需求实现：轻量级人体姿态估计模型的修炼之路（附MoveNet复现经验）...
点击上方"计算机视觉工坊",选择"星标" 干货第一时间送达作者丨Fire 编辑丨极市平台导读本文记录了作者实现轻量级人体姿态估计模型的全过程,从方案的选取 ...
单人人体姿态估计综述（转发）
版权声明:本文为博主原创文章,未经博主允许不得转载. https://blog.csdn.net/Anymake_ren/article/details/81978260 </div>&l ...
2019深度学习人体姿态估计指南
本文素材来源于nanonets技术博客网站,经本人编辑首发于CSDN,仅供技术分享所用,不作商用. 原文地址:https://blog.nanonets.com/human-pose-estimati ...

人体姿态估计--Learning Feature Pyramids for Human Pose Estimation

人体姿态估计--Learning Feature Pyramids for Human Pose Estimation相关推荐

最新文章

热门文章