-
公开(公告)号:CN119293740B
公开(公告)日:2025-03-07
申请号:CN202411833608.2
申请日:2024-12-13
Applicant: 南京信息工程大学
IPC: G06F18/25 , G06F18/241 , G06V40/16 , G06V40/10 , G06V10/80 , G06N3/0455 , G06N3/08 , G06V10/82
Abstract: 本发明公开了一种多模态对话情感识别方法,涉及多模态情感识别和人机交互技术领域,包括:利用人脸识别模型和姿态识别工具分别得到表情时序特征和姿态时序特征;注意力模块对表情和姿态特征进行自适应加权融合,获得融合的视觉模态特征;构建上下文语境信息的新表达并基于提示的情感建模技术得到情感表示并通过文本编码器提取文本模态特征;使用数据向量化模型提取说话者对应语音的模态特征;提出跳跃连接多头注意力跨模态融合方法,对多模态的模态特征进行跨模态对齐与融合,之后通过情感分类器模块进行情感识别。本发明有效解决了传统多模态情感识别中关键情感线索识别不足及融合不充分的问题,提高了情感识别的准确性和鲁棒性。
-
公开(公告)号:CN118538367A
公开(公告)日:2024-08-23
申请号:CN202411003151.2
申请日:2024-07-25
Applicant: 南京信息工程大学
Abstract: 本发明公开了生物行为识别领域的一种基于面部和体态行为感知的渐进性放松训练方法,包括,播放预先设计的用于渐进性放松训练的音频;在音频播放过程中,执行以下训练操作:获取被训练人的图像数据;其中图像数据包括面部图像和躯体图像;基于面部图像,通过Blaze Face算法获取面部关键点信息,面部关键点信息包括双眼关键点信息和嘴巴关键点信息;根据双眼关键点信息计算双眼开合比,根据嘴巴关键点信息计算嘴巴开合比;基于躯体图像,通过Blaze Pose算法获取身体关键点信息,计算头‑肩夹角;根据双眼开合比、嘴巴开合比和头‑肩夹角,确定眼部特征值、嘴巴特征值和体态特征值;根据眼部特征值、嘴巴特征值和体态特征值,控制训练音频的播放。
-
公开(公告)号:CN106443385A
公开(公告)日:2017-02-22
申请号:CN201610901584.9
申请日:2016-10-17
Applicant: 南京信息工程大学
IPC: G01R31/12
CPC classification number: G01R31/12
Abstract: 本发明利用PSPICE仿真软件采用组合波对多级电涌保护器SPD进行线-地、线-线两种工作模式下的残压以及通流量进行测试,同时利用实际冲击试验平台进行多级SPD的实际冲击试验,然后将仿真测试结果与实际冲击试验结果进行对比,得出的仿真冲击试验最终的最大残压值与最大通流容量较实际测量更为理想。本发明通过实际冲击试验结果对仿真结果进行验证,充分说明了PSPICE仿真冲击试验的可行性,使其可作为实际冲击试验的替代或对比验证数据,为SPD的应用提供参考依据。
-
公开(公告)号:CN208580432U
公开(公告)日:2019-03-05
申请号:CN201820044082.3
申请日:2018-01-11
Applicant: 南京信息工程大学
Abstract: 本实用新型公开了一种基于小波和Canny算子的图像阶梯效应消除系统,包括图像数据文件输入模块、地址生成单元、缓冲控制单元、时钟信号产生模块、系统控制模块、二维变换处理器、时序控制模块和VGA显示驱动模块;系统先从外部SD卡中读入图像文件,逐行存储到SDRAM中并生成存储地址,地址生成单元对图像数据进行边缘扩展并将数据写入缓冲控制单元;在系统控制模块的控制协调下,二维变换处理器从FIFO中读取数据然后进行抽插值运算,将图像数据分解成四个数据子带,处理结果通过VGA协议传输至VGA显示器上进行显示。本实用新型提供的图像阶梯效应消除系统,极大消除图像阶梯效应,在保证图片质量同时提高运行速度;其低功耗的设计,可以嵌入到微型设备中使用。
-
公开(公告)号:CN207133941U
公开(公告)日:2018-03-23
申请号:CN201720592890.9
申请日:2017-05-25
Applicant: 南京信息工程大学
IPC: G08B19/00
Abstract: 本实用新型提出一种带有自主通信功能的防盗防火装置,包括信号数据检测模块、信号数据处理模块和自主通信模块;信号数据检测模块、信号数据处理模块和自主通信模块依次顺序连接;信号数据检测模块包括红外传感器和烟雾传感器;信号数据处理模块包括信号放大模块、信号比较模块和数据控制模块;自主通信模块包括GSM通信模块;红外传感器和烟雾传感器都与信号放大模块相连接;信号放大模块、信号比较模块和数据控制模块依次顺序连接;数据控制模块与GSM通信模块相连接;本实用新型功能完善,适用范围性广,能够第一时间进行自主联系当事人,化解危险挽回损失,结构简单,而且性能稳定,测量准确度较高,适合实际应用。
-
-
-
-