简介 论文: Middle Fusion and Multi-Stage, Multi-Form Prompts for Robust RGB-T Tracking RGBT 追踪主要受到以下两个阻碍: 1) 性能和效率之间的权衡; 2) 训练数据的稀缺. 为了解决后一个挑战, 一些方法采用提示来微调. 然而这些方法只考虑到模态相关的模式, 而忽略了模态无关的模式, 同时也忽略了开放场景中...

简介 论文来源: Bridging Search Region Interaction With Template for RGB-T Tracking 现有的搜索算法通常会直接连接 RGB 和 T 模态搜索区域, 该方法存在大量冗余背景噪声. 而另一些方法从搜索帧中采样候选框, 对孤立的 RGB 框和 T 框进行各种融合, 这限制了局部区域的跨模态交互. 本文将提出模板桥接搜索区域交互(...

简介 论文来源: Unified Single-Stage Transformer Network for Efficient RGB-T Tracking 现有的网络通常以单独的方式提取模态特征, 缺乏模态之间的交互与指导, 三阶段融合策略极大地限制了跟踪速度. 本文作者将提出一个统一的单级 Transformer RGB-T 追踪方法, 即 USTrack, 它将三阶段统一为一个 Vi...

简介 论文来源: Joint Feature Learning and Relation Modeling for Tracking: A One-Stream Framework 当前流行的各种模型都是将模板提取与区域搜索分成两个分支, 再进行关系建模, 因而在提取特征阶段难以感知目标与背景区别. 为了解决该问题, 作者提出了一种单流跟踪框架, 以统一特征学习与关系建模. 由于该框架是高...

简介 论文来源: Multi-Scale Feature Interactive Fusion Network for RGBT Tracking 现有的模型总是忽略了特征之间丰富的上下文信息. 在本文中, 作者将使用多尺度特征提取的方法, 使用通道感知模块计算分支可靠性, 并用 Transformer 进行特征交互. 此外, 还有一个全局特征融合模块, 用以平衡不同场景下的模态贡献, 自...

简介 论文来源: RGBT tracking via reliable feature configuration 许多模型对自适应融合的理解还停留在权重阶段, 大量算力被消耗于权重计算, 同时这种方法并没考虑到低可靠性模态对另一模态的影响. 本文作者将提出新颖的基于可靠性的特征配置方法, 实现鲁棒性 RGBT 追踪. 其将使用 3 种追踪器来跟踪目标, 使用特殊的评分机制来评估追踪器可靠...

简介 论文来源: HATFNet: Hierarchical adaptive trident fusion network for RGBT tracking 现有的 RGBT 跟踪算法很少能够充分利用层次和多模态特征, 本文作者认为不同的卷积层的特征会有不同的贡献, 因而需要分开考虑. 在模态的融合上, 作者还设计了一种权重算法, 自动改变两个模态的权重. 方法 图1 HATFNe...

前言 论文来源: Region Selective Fusion Network for Robust RGB-T Tracking 可见光与热红外模态的融合, 为算法提供了更多的信息, 从而提高算法的准确率. 但是由于模态中场景的高度重叠, RGBT 数据中必然包含大量冗余信息. 同时每个模态的质量都会随时变化, 这意味着更多的误导信息. 本文将图像视为一个个不重叠的区域, 消除不可靠区...

前言 论文来源: RGB-T Tracking Based on Mixed Attention 大部分RGB-T跟踪算法都使用了CNN的下采样方法来提取目标特征, 然而大部分无意义的信息消耗了大量算力, 同时CNN难以理解目标与背景的关系. 而Transformer则解决了这些问题. 本文将使用特征级融合的方式, 集成两个模态的特征, 抑制低质量模态的影响, 从而提升RGB-T跟踪的准确...