商汤等提出:统一多目标跟踪框架
前戏
最近出了真的很多很多论文,各种SOTA。比如今天po的多目标跟踪方向的论文,明天应该会po一篇人群密度估计或者目标检测方向的SOTA论文。最新的论文,Amusi就不详细解读了(可能自己也不会)。
因为论文这玩意,还是要自己去品才有滋味。或许过两天,论文的作者团队会解读一番,对照着作者的解答来理解,这才原滋原味。
正文
《Multi-Object Tracking with Multiple Cues and Switcher-Aware Classification》
arXiv:https://arxiv.org/abs/1901.06129
作者团队:商汤&北航&悉尼大学
注:2019年01月21日刚出炉的paper
Abstract:In this paper, we propose a unified Multi-Object Tracking (MOT) framework learning to make full use of long term and short term cues for handling complex cases in MOT scenes. Besides, for better association, we propose switcher-aware classification (SAC), which takes the potential identity-switch causer (switcher) into consideration. Specifically, the proposed framework includes a Single Object Tracking (SOT) sub-net to capture short term cues, a re-identification (ReID) sub-net to extract long term cues and a switcher-aware classifier to make matching decisions using extracted features from the main target and the switcher. Short term cues help to find false negatives, while long term cues avoid critical mistakes when occlusion happens, and the SAC learns to combine multiple cues in an effective way and improves robustness. The method is evaluated on the challenging MOT benchmarks and achieves the state-of-the-art results.
摘要:在本文中,我们提出了一个统一的多目标跟踪(MOT)框架,可以学会充分利用长期和短期线索来处理MOT场景中的复杂情况。此外,为了更好地关联,我们提出了切换器感知分类(SAC),它考虑了潜在的身份切换监视器(切换器)。 具体而言,所提出的框架包括用于捕获短期线索的单个对象跟踪(SOT)子网络,用于提取长期线索的 ReID 子网络以及用于使用提取的特征进行匹配决策的切换器感知分类器。 从主目标和切换器。短期线索有助于发现漏报(FN),而长期线索避免了发生遮挡时的严重错误,并且SAC学会以有效的方式组合多个线索并提高稳健性。该方法在具有挑战性的MOT基准测试中进行评估,并达到 SOTA。
The proposed MOT framework
Siamese-RPN architecture for SOT
创新点
Using SOT Tracker for Short Term Cues
Using ReID Network for Long Term Cues
Switcher-Aware Classifier
SOTA(MOT16 and MOT17)
识别示例
- 由单目标跟踪实现多目标跟踪的思想框架
- 由单目标跟踪实现多目标跟踪的思想框架
- NeurIPS 2019 | 中科院、旷视提出DetNAS框架:一种可用于目标检测的Backbone搜索
- 目标跟踪学习系列九:Struck:Structured Output Tracking with Kernels头文件代码框架
- 目标跟踪经典算法 SiameseFC框架在Linux + cuda 8.0 + cudnn 5.1 + matconvnet 1.0- beta-20 上的配置
- 目标跟踪系统框架
- 一些目标检测、跟踪、识别标准测试视频集和图像数据库
- VOT目标跟踪测试中的测试效果展示
- 目标跟踪小结
- 重新为Linux 5.5提出了统一的sizeof_member()
- 【Python+OpenCV】目标跟踪-背景分割器:KNN、MOG2和GMG
- 现代罗塞塔石碑:微软提出深度学习框架的通用语言
- python3--利用百度智能平台实现目标人物跟踪标记
- 基于粒子滤波的目标跟踪基本算法(Matlab)
- 图像目标检测与跟踪学习笔记(四)
- 目标跟踪:模板匹配
- 深度学习在目标跟踪中的应用
- 用mfc做目标跟踪界面
- [收藏]不仅仅跟随更能够提出震撼性的技术框架/技术特点出来
- TLD跟踪算法(单目标)相关资料