公开(公告)号：CN119579412A

公开(公告)日：2025-03-07

申请号：CN202411654998.7

申请日：2024-11-19

Applicant: 阜阳师范大学

Inventor： 申志军 ,  李传宗 ,  范建中 ,  顾睿雄

IPC: G06T3/4053 ,  G06T3/4046 ,  G06N3/0455 ,  G06N3/08 ,  G06T5/60 ,  G06T5/50

Abstract: 本发明公开了一种基于可变形transformer对齐的多尺度调制视频超分重构方法，涉及计算机视觉领域。方法包括：获取视频的浅层特征图序列；采用基于可变形transformer对齐的多尺度调制网络对浅层特征图序列进行处理；所述基于可变形transformer对齐的多尺度调制网络中包括：可变形transformer对齐模块、多尺度调制模块，Swin Transformer混合模块和重建模块；可变形transformer对齐模块用于特征对齐；多尺度调制模块用于多尺度特征融合；Swin Transformer混合模块对调制特征图进行空间特征捕捉；重建模块用于重构高分率图像。本发明提出基于可变形transformer对齐的多尺度调制网络，通过可变形transformer对齐模块与多尺度调制模块结合，在保证重构性能的同时，利用相对较少的网络参数提升了网络的计算效率，平衡了网络的复杂度和性能。