基于双通道输入的非接触式心率计算方法及系统

    公开(公告)号:CN119166963A

    公开(公告)日:2024-12-20

    申请号:CN202411202206.2

    申请日:2024-08-29

    Abstract: 本发明提供一种基于双通道输入的非接触式心率计算方法、系统、存储介质和电子设备,涉及非接触式心率计算领域。本发明将面部可见光视频和面部差分图像序列分别作为基于双流输入的非接触式心率提取模型的输入,利用Transformer模型强大的自注意力机制,捕捉视频与视频差分间各个位置之间的关联关系,获取rPPG信号,通过快速傅里叶变换,获取被测试者的心率值。通过设计双流输入更好的聚合运动相关的细粒度信息,利用自注意力机制融合全局时空信息,从而提高算法对于运动的鲁棒性。此外,在模型训练过程中设计了一种梯度动态调节策略。会根据每一个mini batch中的数据动态调整梯度方向,有效解决了训练过程中优化方向不稳定的问题,有效增强了模型的泛化性能。

    基于双通道输入的非接触式心率计算方法及系统

    公开(公告)号:CN119166963B

    公开(公告)日:2025-04-29

    申请号:CN202411202206.2

    申请日:2024-08-29

    Abstract: 本发明提供一种基于双通道输入的非接触式心率计算方法、系统、存储介质和电子设备,涉及非接触式心率计算领域。本发明将面部可见光视频和面部差分图像序列分别作为基于双流输入的非接触式心率提取模型的输入,利用Transformer模型强大的自注意力机制,捕捉视频与视频差分间各个位置之间的关联关系,获取rPPG信号,通过快速傅里叶变换,获取被测试者的心率值。通过设计双流输入更好的聚合运动相关的细粒度信息,利用自注意力机制融合全局时空信息,从而提高算法对于运动的鲁棒性。此外,在模型训练过程中设计了一种梯度动态调节策略。会根据每一个mini batch中的数据动态调整梯度方向,有效解决了训练过程中优化方向不稳定的问题,有效增强了模型的泛化性能。

Patent Agency Ranking