-
公开(公告)号:CN119672188A
公开(公告)日:2025-03-21
申请号:CN202411940358.2
申请日:2024-12-26
Applicant: 华中科技大学
IPC: G06T13/40 , G06V40/16 , G06V10/80 , G06V10/82 , G06N3/045 , G06N3/0455 , G06N3/0475 , G06N3/09 , G06N3/096
Abstract: 本申请属于计算机视觉与视频生成领域,具体公开了一种基于一致性蒸馏的人像动画生成方法及系统。方法包括:收集参考图像样本和人体姿态序列样本作为训练集,基于所述训练集构建预训练的教师模型,所述教师模型用于生成目标视频;初始化一致性蒸馏模型得到学生模型,通过轨迹分段一致性蒸馏法将所述教师模型的知识传递给学生模型;通过辅助损失优化、动态区域加权优化以及面部细节注入对所述学生模型进行优化,得到优化模型;将待推理的参考图像和人体姿态序列输入至所述优化模型中,得到人像动画视频。通过本申请能够有效提升生成视频的时序一致性、连贯性和细节保真度。
-
公开(公告)号:CN118692007A
公开(公告)日:2024-09-24
申请号:CN202410776255.0
申请日:2024-06-17
Applicant: 华中科技大学
Abstract: 本申请公开了一种具有分析能力的视频异常检测及其模型训练方法,属于视频检测技术领域。本申请视频异常检测模型由视频异常检测网络和多模态解码网络构成,其中,视频异常检测网络通过由弱监督训练数据转化的全监督训练数据进行异常视频的识别训练,再通过多模态解码网络学习异常图像帧特征、对应指令文本特征和对应分析文本特征之间的特征关系,由此本申请视频异常检测模型不仅能高效检测出视频中的异常事件,同时也实现了对检测出的异常事件进行解释分析。
-