自己做的网站注册用户无法收到激活邮箱的邮件,找货源的网上平台有哪些,模板网站建设珠海,做网站需要什么费用1.多目标跟踪分类
多目标跟踪#xff0c;即MOT#xff08;Multi-Object Tracking#xff09;#xff0c;也就是在一段视频中同时跟踪多个目标。MOT主要应用在安防监控和自动驾驶等领域中。 1.1 初始化方法
多目标跟踪#xff0c;即MOT#xff08;Multi-Object Trackin…1.多目标跟踪分类
多目标跟踪即MOTMulti-Object Tracking也就是在一段视频中同时跟踪多个目标。MOT主要应用在安防监控和自动驾驶等领域中。 1.1 初始化方法
多目标跟踪即MOTMulti-Object Tracking问题中并不是所有目标都会在第一帧出现也并不是所有目标都会出现在每一帧。那如何对出现的目标进行初始化可以作为跟踪算法的分类表针。常见的初始化方法分为两大类一个是Detection-Based-Tracking(DBT),一个是Detection-Free-Tracking(DFT)。下图比较形象地说明了两类算法的区别。 DBT DBT的方式就是典型的tracking-by-detection模式即先检测目标然后将目标关联进入跟踪轨迹中。那么就存在两个问题第一该跟踪方式非常依赖目标检测器的性能第二目标检测的实质是分类和回归即该跟踪方式只能针对特定的目标类型如行人、车辆、动物。DBT则是目前业界研究的主流。 DFT DFT是单目标跟踪领域的常用初始化方法即每当新目标出现时人为告诉算法新目标的位置这样做的好处是target free坏处就是过程比较麻烦存在过多的交互所以DBT相对来说更受欢迎。
1.2 处理模式
多目标跟踪即MOTMulti-Object Tracking也存在着不同的处理模式Online和Offline两大类其主要区别在于是否用到了后续帧的信息。下图形象解释了Online与Offline跟踪的区别。 Online Tracking Online Tracking是对视频帧逐帧进行处理当前帧的跟踪仅利用过去的信息。 Offline Tracking Offline Tracking利用前后视频帧的信息对当前帧进行目标跟踪这种方式只适用于视频如果应用于摄像头则会有滞后效应通常采用时间窗方式进行处理以节省内存和加速。
2.运动模型
为了简化多目标跟踪的难度我们引入运动模型类简化求解过程运动模型捕捉目标的动态行为它估计目标在未来帧中的潜在位置从而减少搜索空间。在大多数情况下假设目标在现实中是平缓运动的那么在图像空间也是如此。对于车辆的运动大致可分为线性和非线性两种运动
线性运动线性运动模型是目前最主流的模型即假设目标的运动属性平稳速度加速度位置非线性运动虽然线性运动模型比较常用但由于存在它解决不了的问题非线性运动模型随之诞生。它可以使tracklets间运动相似度计算得更加准确。
3.跟踪方法
多目标跟踪中基于神经网络的算法端到端的算法并不多主要还在实验室的刷榜阶段模型复杂速度慢追踪结果也不好主要给介绍以下两种主流的算法 3.1 基于Kalman和KM算法的后端优化算法
该类算法能达到实时性但依赖于检测算法效果要好特征区分要好输出最终结果的好坏依赖于较强的检测算法而基于卡尔曼加匈牙利匹配的追踪算法作用在于能够输出检测目标的id其次能保证追踪算法的实时性这样追踪效果会好id切换少其代表性的算法是SORT/DeepSORT。 SORT 是一种实用的多目标跟踪算法引入了线性速度模型与卡尔曼滤波来进行位置预测在无合适匹配检测框的情况下使用运动模型来预测物体的位置。
匈牙利算法是一种寻找二分图的最大匹配的算法在多目标跟踪问题中可以简单理解为寻找前后两帧的若干目标的匹配最优解的一种算法。
而卡尔曼滤波可以看作是一种运动模型用来对目标的轨迹进行预测并且使用确信度较高的跟踪结果进行预测结果的修正。
多目标追踪一般接在目标检测后。在工业界目标检测采用比较多的是YOLO检测网络单阶段式速度快精度不差部署在NV的平台帧率可以达到30fps以上。
所以要实现目标检测代码和多目标追踪代码集成的任务需要先将两者的框架统一。即先实现目标检测网络检测的输出结果主要是将检测框的位置信息输入到多目标追踪算法中。
3.2 基于多线程的单目标跟踪的多目标跟踪算法
这类算法特点是跟踪效果会很好因为其为每一类物体都单独分配了一个跟踪器。但该算法对目标尺度变化要求较大参数调试需要合理同时该算法极耗cpu资源实时性不高代表算法是利用KCF进行目标跟踪。
多目标追踪本质上是多个目标同时运动的问题所以有提出将单目标跟踪器引入到多目标追踪的问题为每一个目标分配一个跟踪器然后间接地使用匹配算法来修正那些跟踪失败或新出现的目标。代表性的单目标跟踪算法为核相关滤波算法KCF,在精度和速度上能够同时达到很高的水平是当时单目标跟踪最优秀的算法之一后来的很多单目标跟踪算法都是基于此做的改进。
实际应用过程中会为每个目标分配一个KCF跟踪器并采用多线程的方式来组织这些跟踪器。同时因为实际硬件条件的限制不可能提供强大的计算力资源会采用检测器与跟踪器交替进行的跟踪策略。由于检测的帧率不高使得跟踪的维持效果出现滞后或框飘的现象较为严重实用性不大。 总结
1.多目标跟踪即MOTMulti-Object Tracking在一段视频中同时跟踪多个目标 基于初始化方法 DBT基于检测的目标跟踪方法DFT每当新目标出现时人为告诉算法新目标的位置 基于处理模型的方法 离线处理利用前后视频帧的信息对当前帧进行目标跟踪在线处理对视频帧逐帧进行处理当前帧的跟踪仅利用过去的信息 运动模型 线性运动常用和非线性运动 常用算法 基于Kalman和KM算法的后端优化算法 和基于多线程的单目标跟踪的多目标跟踪算法
