公开(公告)号：CN117173023A

公开(公告)日：2023-12-05

申请号：CN202311205827.1

申请日：2023-09-18

Applicant: 安徽大学

Inventor： 赵志成 ,  包静远 ,  王春 ,  郭华硕 ,  张钰 ,  肖云 ,  李成龙 ,  汤进

IPC: G06T3/40 ,  G06T5/50 ,  G06N3/0464 ,  G06N3/048 ,  G06N3/08

Abstract: 本发明提供无人机高分辨率热红外图像生成方法及系统，方法包括：对无人机捕获的热图像和可见光图像进行不同类型的浅层特征提取，得到两种模态的浅层特征；构建并利用相互指导模块MGM，将可见和热成像特征分别输入到MGM的两个不同分支中，以提取两个子任务的深层特征，通过双向注意力传递机制，使两个任务之间进行全面的特征交互，得到高质量的模态转换和超分辨率特征；构建并利用双向对齐融合模块BAFM，同时将两个分支的输出精细对齐到相同的特征空间，并进行特征融合；融合的特征通过pixelshuffle上采样得到超分辨率结果。本发明解决了由于可见图像和热红外图像信息利用不充分、不同模态之间存在差异导致无人机热红外图像质量较低的技术问题。