基于特征局部校正和多模态信道稀疏选择提示的红外跟踪方法

本发明公开了基于特征局部校正和多模态信道稀疏选择提示的红外跟踪方法，包括以下步骤；步骤(1)：将多模态视频按照时间顺序截取为多帧静止图像，得到数据集，对于训练阶段和跟踪阶段进行不同操作；步骤(2)：使用数据集训练微调网络权重参数，得到算法网络权重，在跟踪阶段的网络加载权重时，使用该网络权重参数进行推理；步骤(3)：加载训练阶段得到的网络权重参数，然后在视频首帧中标注出目标所在位置，将在未来帧中持续跟踪该目标，输出该目标的位置信息。本发明通过提示模块从语义空间两个角度考虑了不同模态特征的内在联系和互补性，提高了提示信息的有效性。通过特征校正模块，有效解决了因空间未对齐造成的特征偏差问题。