公开(公告)号：CN119832941A

公开(公告)日：2025-04-15

申请号：CN202510306207.X

申请日：2025-03-14

Applicant: 暨南大学

Inventor： 宋开颜 ,  赵雯 ,  陈卓铭

IPC: G10L25/66 ,  G10L15/18 ,  G10L15/26 ,  G10L25/24 ,  G10L25/27 ,  A61B5/00 ,  G06N3/0455 ,  G06N3/096 ,  G06F18/10 ,  G06F18/213 ,  G06F18/25

Abstract: 本发明公开了基于迁移学习的粤语‑普通话失语症自动评测方法，可以充分利用普通话、粤语语音数据进行不同语言的知识传递，并且不需要对粤语、普通话语音数据进行标注，可在粤语‑普通话场景下进行失语症检测；通过从语音数据和由语音数据转录成的文本数据中提取两种语言的语音特征、语义特征和语法特征，并将提取的特征分离为共同特征和私有特征；通过引入对抗领域自适应来对齐粤语和普通话的语音特征、语义特征和语法特征的共同部分，同时采用对比学习中的InfoNCE损失函数最大化输入语音和文本数据与提取出的语音特征、语义特征和语法特征的互信息，确保提取出的特征具有代表性，大大提高了失语症的评测精度。