公开(公告)号：CN115147610B

公开(公告)日：2025-05-02

申请号：CN202210897836.0

申请日：2022-07-28

Applicant: 东北大学

Inventor： 栾悦 ,  韩春燕 ,  任涛

IPC: G06V10/40 ,  G06V10/20 ,  G06V20/40 ,  G06V10/82 ,  G06N3/0455 ,  G06N3/045 ,  G06N3/0464 ,  G06N3/0475 ,  G06N3/08

Abstract: 本发明公开了一种基于时空注意力机制的自适应的帧插方法，涉及视频处理领域；通过对编码‑解码(Encoder‑Decoder)结构加入时空注意力机制，保证对相邻帧的特征提取完全。本发明采用了由时空Attention的U‑Net网络进行图片的特征的提取，分别从通道上和空间维度上有重点的学习图片的特征，而不是以同样的标准对待不同的通道和空间维度信息，使得特征提取完全，有助于后期子网络的参数生成；对输入的相邻帧就采用的边界填充的方式，避免了在生成的过程中由于遮挡等其他原因，而产生失真的合成帧。

公开(公告)号：CN115147610A

公开(公告)日：2022-10-04

申请号：CN202210897836.0

申请日：2022-07-28

Applicant: 东北大学

Inventor： 栾悦 ,  韩春燕 ,  任涛

IPC: G06V10/40 ,  G06V10/20 ,  G06V20/40 ,  G06V10/82 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明公开了一种基于时空注意力机制的自适应的帧插方法，涉及视频处理领域；通过对编码‑解码(Encoder‑Decoder)结构加入时空注意力机制，保证对相邻帧的特征提取完全。本发明采用了由时空Attention的U‑Net网络进行图片的特征的提取，分别从通道上和空间维度上有重点的学习图片的特征，而不是以同样的标准对待不同的通道和空间维度信息，使得特征提取完全，有助于后期子网络的参数生成；对输入的相邻帧就采用的边界填充的方式，避免了在生成的过程中由于遮挡等其他原因，而产生失真的合成帧。