公开(公告)号：CN118522441A

公开(公告)日：2024-08-20

申请号：CN202410630934.7

申请日：2024-05-21

Applicant: 南京信息工程大学

Inventor： 宋彪 ,  张梓豪 ,  张小瑞 ,  孙伟 ,  张浩明

IPC: G16H50/20 ,  G16H50/30 ,  G06V40/16 ,  G06V40/20 ,  G06V10/80 ,  G06V10/774 ,  G06V10/82 ,  G06V10/62 ,  G06V10/44 ,  G06N3/045 ,  G06N3/0464 ,  G06N3/084

Abstract: 本发明公开了一种基于多特征融合的抑郁倾向检测方法、存储介质及设备，包括：获取待预测人物视频，输入到预先训练好的基于多特征融合的抑郁倾向预测模型，得到最终抑郁倾向预测结果；模型处理过程，包括：根据待预测人物视频分别提取头部运动特征和面部表情特征；根据头部运动特征预测基于头动的抑郁倾向预测结果；根据面部表情特征预测基于表情的抑郁倾向预测结果；使用加权投票法对预测结果进行融合得到最终抑郁倾向预测结果。优点：结合表情及头动信息对抑郁倾向进行评估，可以缓解仅凭表情变化对抑郁倾向进行评估的不可靠性，通过时空块提取抽象时空信息，在不大量增加计算量的同时增强模型的视频理解能力，提高模型预测准确率。