公开(公告)号：CN119418032A

公开(公告)日：2025-02-11

申请号：CN202411324760.8

申请日：2024-09-23

Applicant: 中北大学

Inventor： 王肖霞 ,  杨风暴 ,  习江涛 ,  李明禄

IPC: G06V10/25 ,  G06V10/44 ,  G06V10/80 ,  G06V10/82 ,  G06V10/143 ,  G06N3/0455 ,  G06N3/0464

Abstract: 本发明涉及可见光与红外多模态目标检测方法，具体为基于红外可见光特征增强与融合的目标检测方法，该方法首先构建了适用于红外与可见光双输入的双分支特征编码器，通过双分支编码网络来分别提取双模态特征。其次，为了在复杂场景下更好地利用双模态特征进行目标检测，提出DBE模块，它利用内部的特征注意力来增强模态间的信息交互。此外，引入交叉注意力机制进一步提升网络对互补性信息的表达能力，从而有效地提升模型的检测性能。实验结果表明，相较于现有方法，本发明方法在SYUGV数据集上表现出色。面对目标相互遮挡影响，局部过渡曝光导致单模态信息缺失等复杂环境，本发明方法仍保持良好的检测性能，具有较强的鲁棒性。