公开(公告)号：CN119885057A

公开(公告)日：2025-04-25

申请号：CN202411736001.2

申请日：2024-11-29

Applicant: 东北林业大学

Inventor： 孙祥龙 ,  王宁宁 ,  董君曼 ,  杨冉 ,  毕研康 ,  夏宁

IPC: G06F18/25 ,  G06F18/213 ,  G06F18/214 ,  G06N3/0442 ,  G06N3/08

Abstract: 一种多模态融合驾驶员愤怒指数实时检测方法和系统，属于检测及分析技术领域，在相关模块及应用流程共同作用下，通过智能手环采集驾驶员的心电数据、车载摄像头捕捉驾驶员的面部表情以及车内麦克风记录驾驶员的语音特征，并利用先进的数据处理和机器学习技术对这些多模态数据进行融合分析，实时评估驾驶员的情绪状态，具体通过心电数据处理、面部表情识别和语音特征提取等步骤，结合注意力机制的多模态融合策略，准确识别驾驶员的愤怒指数，并根据预设阈值触发相应的预警措施，有助于公交公司及时发现驾驶员的心理问题，并采取相应的干预措施，维护驾驶员的心理健康，能够有效提升公交车行驶的安全性，改善驾驶员的工作体验，并促进其心理健康。