计算机视觉之目标检测与轨迹追踪

学习笔记
在上一篇中,已经大致阐述了yolo的原理,现在在检测的基础上实现目标的追踪,我使用yolov5+deepsort进行追踪轨迹.
不进行训练,只是使用官方给定的权重文件以及实验视频.

一个浪费了一下午时间得到的感想

对于依赖环境的错误,不要一个个改包就按照官方从头开始重装所有的依赖包

该死的依赖w(ﾟДﾟ)w

目标轨迹检测

目标检测:这部分是检测到感兴趣的初始目标集,对目标分配ID,在随后的时间中进行追踪.这里是使用的yolov5进行目标的检测
目标的跟踪;可分为单目标跟踪 (Single Object Tracking- SOT) 和多目标跟踪 (Multi Object Tracking- MOT).前者较为经典的算法有SiamFC,后者则有sort算法.下面主要说的是后一种

deepsort是基于sort算法的扩展,DeepSORT 将深度学习引入到 SORT 算法中,通过添加外观描述符来减少移动过程中相同目标的因为速度的原因引起的错误ID切换,从而提高跟踪效率.

关于sort算法

这里是原博文

sort的思路:

首先通过检测器yolo,把每一帧的物体检测出来
通过卡尔曼滤波器预测物体在下一帧的位置
将预测的位置与下一帧实际检测到的位置做IOU的计算,得到相邻两帧物体的相似度
最后利用匈牙利匹配得到相邻帧的对应id

由于这里只是计算框的重叠面积，因此如果两个物体发生遮挡，会出现id交换的情况,所以作者为了降低id交换，提出了deep sort算法。deep sort之所以可以把id交换降低45%，是因为它将面积匹配修改为了特征匹配,在匹配之前作者利用resnet50先将特征里取出来,由于一般情况下很少会遇到外观特征完全相同的两个物体，因此这种改进是有效的

其次是改进的deepsort算法

SORT算法使用简单的卡尔曼滤波处理逐帧数据的关联性以及使用匈牙利算法进行关联度量,这种简单的算法在高帧速率下获得了良好的性能,但由于SORT忽略了被检测物体的表面特征，因此只有在物体状态估计不确定性较低是才会准确，在Deep SORT中使用了更加可靠的度量来代替关联度量,并使用CNN网络在大规模行人数据集进行训练，并提取特征，已增加网络对遗失和障碍的鲁棒性

检测器得到检测目标
卡尔曼滤波预测下一帧目标(保证目标不会在识别中丢失)
使用匈牙利算法将预测后的和当前帧中的目标进行匹配（级联匹配和IOU匹配
卡尔曼滤波更新

关于原理

匈牙利算法:匈牙利算法是最优规划分配问题的一种解法,同样的还有清华算法等等,基于此定理:如果代价矩阵的某一行或某一列同时加上或减去某个数，则这个新的代价矩阵的最优分配仍然是原代价矩阵的最优分配
卡尔曼滤波:
对于目标预测的方法,主要是均值(Mean),表示目标的位置信息,协方差(Covariance ),表示目标位置信息的不确定性两方面内容,
因此卡尔曼滤波的也有两步:预测track在下一时刻的位置->基于detection来更新预测的位置

计算机视觉之目标检测与轨迹追踪相关推荐

计算机视觉多目标检测整合算法
计算机视觉多目标检测整合算法输入输出接口 Input:image/video Output:(1)BandingBox左上右下的坐标位置 (2)Type类型:人,车,-,-(3) 执行度:是指判别目 ...
CV之OD：计算机视觉之目标检测(Object Detection)方向的简介、使用方法、案例应用之详细攻略
CV之OD:计算机视觉之目标检测(Object Detection)方向的简介.使用方法.案例应用之详细攻略目录 OD目标检测的简介 1.Selective Search for Object Re ...
计算机视觉算法——目标检测网络总结
计算机视觉算法--目标检测网络总结计算机视觉算法--目标检测网络总结 1. RCNN系列 1.1 RCNN 1.1.1 关键知识点--网络结构及特点 1.1.2 关键知识点--RCNN存在的问题 1 ...
计算机视觉：目标检测的发展历程与基础概念
计算机视觉:目标检测的发展历程与基础概念目标检测发展历程目标检测基础概念边界框(bounding box) 锚框(Anchor box) 交并比对计算机而言,能够"看到"的 ...
非极大值抑制_【计算机视觉——RCNN目标检测系列】三、IoU与非极大抑制
写在前面在上一篇博客:[计算机视觉-RCNN目标检测系列]二.边界框回归(Bounding-Box Regression)( 戴璞微:[计算机视觉-RCNN目标检测系列]二.边界框回归(Boundi ...
Deepsort + Yolo 实现行人检测和轨迹追踪
作者 | 李秋键出品 | AI科技大本营(ID:rgznai100) 引言行人检测是近年来计算机视觉领域的研究热点,同时也是目标检测领域中的难点.其目的是识别和定位图像中存在的行人,在许多领域中都 ...
学习计算机视觉之目标检测的总结
前言现今,深度学习发展如此迅猛,在计算机视觉.自然语言处理.广告推荐及广告点击率预估等领域都取得巨大的突破.在计算机视觉领域中的目标检测被广泛的应用到实际生产生活中.例如:人脸检测.行人车辆检测.通 ...
【详解】计算机视觉之目标检测
目录目标检测 1 定义 2 常用数据集 2.1 PASCAL VOC数据集 2.2 MS COCO数据集 3 常用的评价指标 3.1 IOU 3.2 mAP(Mean Average Precisi ...
《计算机视觉之目标检测》IOU详解及代码
今天在改模型的时候刚好用到了IOU,因此将IOU说说,记录一下代码,方便以后复用. 1.什么是IOU IoU 的全称为交并比(Intersection over Union),它的计算也比较简单,就是 ...

计算机视觉之目标检测与轨迹追踪

目标轨迹检测

关于原理

计算机视觉之目标检测与轨迹追踪相关推荐

最新文章

热门文章