Learning Policies for Adaptive Tracking with Deep Feature Cascades

2024-04-17 17:46:23

Learning Policies for Adaptive Tracking with Deep Feature Cascades

ICCV17 shotlight
作者：Chen Huang， CMU postdoctor，导师 Deva Ramanan

summary

文章主要贡献在于速度与精度的权衡（AUC 0.638，fps 23），通过强化学习策略，来控制网络的深度，使得精度和速度最佳。目前的跟踪算法大多数可以分为两类：基于lower feature的CF类方法，这类方法速度极快，到精度不好；基于deep learning的网络方法，这类方法精度高，但速度慢，无法做到实时。本文构建了一种深度特征 cascades（瀑布?），然后在每一层进行目标检测，但检测结果符合要求时（用强化Q-learning做决策），则停止检测，输出结果；否则进入下一层继续搜索检测目标。

method

object location

对于 cheap features，文章用的是dcf，对于卷积特征（c1-c5），文章用的是自相关函数：

f(x,z)=\varphi (x)*\varphi(z)+V\mathbb{I}

Learning Policies with Reinforcement Learning

action 文章action只定义了尺度的变化，没有涉及平移。action定义见上图右端。
station station为一tuple（F,h）,F为平均score map，h为前四个状态的one-hotvector。
reward reward定义为

策略学习

文章用Q-leaning进行策略学习。

Implementation details

用类似SiamFC中的AlexNet进行特征提取，然后在ImageNet中训练整个网络，包括q-leaning方法。网络只进行off-line训练（因为没有全连接层所以不用on-line训练？）

Learning Policies for Adaptive Tracking with Deep Feature Cascades相关推荐

Learning Policies for Adaptive Tracking with Deep Feature Cascades（深度增强学习、目标跟踪）
1.论文相关论文题目: "Learning Policies for Adaptive Tracking with Deep Feature Cascades." ICCV (2 ...
Learning Policies for Adaptive Tracking with Deep Feature Cascades全文翻译
摘要视觉对象跟踪是一项基本且时间紧迫的视觉任务.近年来出现了许多基于实时像素相关滤波器的浅层跟踪方法,以及具有顶级性能但需要高端 GPU 的深层方法.在本文中,我们学习在不损失准确性的情况下提高 ...
ICCV 2017 EAST:《Learning Policies for Adaptive Tracking with Deep Feature Cascades》论文笔记
理解出错之处望不吝指正. 本文模型叫做EAST.作者的动机是在不降低准确率的同时提升深层模型的速度.论文的主要思想:在SiameseFC中,所有帧都用conv5的特征去检测,EAST的出发点是(外观相 ...
论文笔记之：Action-Decision Networks for Visual Tracking with Deep Reinforcement Learning
论文笔记之:Action-Decision Networks for Visual Tracking with Deep Reinforcement Learning 2017-06-06 21: ...
[CVPR2016]Learning Deep Feature Representations with Domain Guided Dropout for Person Re-id
论文题目:Learning Deep Feature Representations with Domain Guided Dropout for Person Re-identiﬁcation 还是 ...
Path Planning for UAV Ground Target Tracking via Deep Reinforcement Learning(IEEE Access-2020)
论文阅读看文章我觉得,先看摘要,摘要基本能够让你了解这篇文章做了什么,但做论文笔记我先会从介绍写起,最终回到摘要 Path Planning for UAV Ground Target Tracki ...
Deep Reinforcement Learning for Visual Object Tracking in Videos 论文笔记
Deep Reinforcement Learning for Visual Object Tracking in Videos 论文笔记 arXiv 摘要:本文提出了一种 DRL 算法进行单目标跟踪 ...
遥感图像-Deep Feature Alignment Neural Networks for Domain Adaptation of Hyperspectral Data高光谱数据深度特征对齐神经
Deep Feature Alignment Neural Networks for Domain Adaptation of Hyperspectral Data高光谱数据领域自适应的深度特征对齐神 ...
DFAnet：Deep Feature Aggregation for Real-time Semantic Segmentation自己翻译的
DFAnet:Deep Feature Aggregation for Real-time Semantic Segmentation 原始论文Li H, Xiong P, Fan H, et al. ...

最新文章

热门文章