面向无人机视角的多源信息融合目标检测

摘要： 为提升复杂环境下面向无人机视角的目标检测效果, 提出一种基于多源信息融合的目标检测算法。该算法以可见光和红外图像为输入, 利用双支路Swin-Transformer结构分别提取两者多层级特征, 并以自主学习的方式分层级融合两者特征, 增进信息互补。在此基础上, 构建双向特征金字塔网络进一步深化浅层与深层特征融合, 充分获取目标多尺度信息。最后, 通过多个检测头在不同层级的特征图上独立预测目标, 提升检测器性能。多个公开数据集的仿真和对比实验表明, 所提算法不仅设定合理性能优越, 且具备良好的鲁棒性和泛化性。 关键词: 多源信息融合, 无人机, 特征融合,