Deep Attentive Tracking via Reciprocative Learning

NIPS18_tracking

Type:Tracking-By-Detection

本篇论文地主要创新是在将注意机制引入到目标跟踪

摘要:源自认知神经科学地视觉注意促进人类对相关的内容的感知。近些年大量工作将注意机制引入到计算机视觉系统中。对于视觉跟踪来说,面临的最大问题在于目标外表的大尺度变化。自注图通过选择性关注临时的鲁棒特征提升视觉跟踪的性能。当前的一些检测跟踪算法主要使用额外的自注模型来生成特征权重,然而分类器并没有采用自注机制。在本文章=中,我们提出一种 reciprocative learning algorithm 算法在训练深度分类器时探索视觉自注机制。该算法由前馈与反馈操作两部分来产生自注图,该图作为正则项与分类LOSS一起训练。该深度分类器习得关注目标区域特征。相关的实验结果证实了该算法达到了极佳的跟踪效果。

引言

近年来。针对不同的视觉应用由此发展出各种各样的跟踪算法,其中视觉注意在视频中目标跟踪起了很大的作用。例如基于DCF的跟踪算法用一张高斯响应特征图表示输入的特征。很多人采用经验空间权重抑制由傅里叶变换过程中的边界效应。从视觉注意角度来说,空间权重也是自注图的一种表现形式。当目标由大尺度变化时,这种空间权重自注图就无法过多的注意边界的响应,从而错误的目标定位。

另一方面,two-stage tracking-by-detection 方法首先采集大量样本,对每一样本进行分类判断前景还是背景。视觉注意在这一方面有很大的潜能。现存的深度跟踪算法大多利用额外的注意模型来生成特征权重。自注机制需要经常以便可以学习到目标的最新特征,可以更好的将目标与背景区分。在本文中,作者直接训练一个自注分类器,整个训练过程包括前馈和反馈两步。在前馈这一步中,将图片输入网络,得到分类score;在反馈这一步中,将第一层网络的导数作为自注图(attention map),将自注图作为一个正则项作为LOSS函数中的一员进行训练。网络参数采用传统的反向传播进行更新。因此该深度分类器可以有效的学习目标相关区域的特征,同时有效地减少了背景的干扰。在测试的过程本网络的权重不进行更新,仅仅输出分类的score。

本文的主要贡献:

  1. 提出一个用于视觉自注的学习算法
  2. 将自注图作为loss函数的一项进行训练,使其关注目标的特征
  3. 通过与其他算法在相关数据集上的对比,我们的算法在性能上取得不错的结果

本文提出的跟踪算法训练过程

最新文章

  1. npm 重点小结
  2. Winform里面的缓存使用
  3. Python字符串基础操作
  4. jsoup方法string转document
  5. Adb shell得到root才干
  6. 【异构计算】GPU与CPU
  7. 读书笔记 effective c++ Item 30 理解内联的里里外外 (大师入场啦)
  8. Android ToggleButton 实践
  9. Supervisor管理进程
  10. Spark初步 从wordcount开始
  11. C# 数据类型之 String(字符串)
  12. KADEMLIA算法
  13. NuGet 使用笔记
  14. 【BZOJ1082】【SCOI2005】栅栏
  15. debian开启cgroup memory子系统
  16. 带参sql$和#的区别(注解)
  17. 宏定义中的反斜杠"\"和宏定义的细节说明
  18. php_Trait
  19. 访问修饰符public,private,protected和default的区别?
  20. C语言字符数组与字符串

热门文章

  1. Reading Notes : 180214 计算机的总线结构
  2. java web项目用cookie记住用户名、密码
  3. ORACLE学习之三
  4. iOS之改变UIAlertViewController字体的颜色
  5. 【设计模式】Java之单例设计模式
  6. win10安装kali组双系统
  7. 分布式存储系统Kudu与HBase的简要分析与对比
  8. CSS-cascading stle sheets
  9. C语言与汇编语言相互调用原理以及实例
  10. 从Github开源项目《云阅》所学到的知识