公开(公告)号：CN119964249A

公开(公告)日：2025-05-09

申请号：CN202510428715.5

申请日：2025-04-08

Applicant: 华侨大学

Inventor： 何建海 ,  郑力新

IPC: G06V40/20 ,  G06N3/042 ,  G06V10/422 ,  G06V10/44 ,  G06V10/52 ,  G06V10/62 ,  G06V10/80 ,  G06V10/82 ,  G06V40/10

Abstract: 本发明公开了基于多分支人体特征融合网络的扶梯行为检测方法，涉及图像处理技术领域，方法包括：利用包含关节流、骨骼流、速度流和骨骼角度流的多分支网络处理该矩阵，分别获得关节、骨骼、速度和角度特征矩阵，并通过自注意力机制融合这些特征；使用多尺度时序卷积捕捉特征在时间上的动态变化，生成时序特征矩阵；通过注意力加权的边缘卷积与时序特征矩阵进行交互，将结果转换为高维特征向量；输入至全连接层映射到类别空间，以预测扶梯行为的概率分布，选取概率最高的类别作为最终的行为预测结果。本发明通过构建多分支人体特征融合网络并结合自注意力机制和多尺度时序卷积，实现了对自动扶梯上行人行为的检测与识别。