公开(公告)号：CN119129599A

公开(公告)日：2024-12-13

申请号：CN202411369012.1

申请日：2024-09-29

Applicant: 河海大学

Inventor： 周晓峰 ,  张晟楠 ,  戚荣志 ,  唐斌 ,  杨欣雨

IPC: G06F40/295 ,  G06N3/045 ,  G06N3/047 ,  G06F17/10 ,  G06F16/35

Abstract: 本发明公开了一种基于知识共享的跨域命名实体识别方法，使用交叉自注意力编码器交换源领域与目标领域的查询矩阵，将嵌入向量转化为注意力向量，增加来自源领域任务的共享信息以提高模型性能；使用带有标签约束的最大均值差异度量源领域与目标领域的特征表示差异，计算具有相同标签的两个样本向量表示之间的总体最大均值差异，实现源领域与目标领域的特征交换，并共享源领域知识；在源领域与目标领域的条件随机场中计算两个领域标签概率的反向相对熵，用于衡量两个领域标签概率分布之间的距离，采用L2正则化约束两个域中标签概率的相对熵，使相同的标签间分布近似，获得相同的标签输出结果。本发明能够通过与文本标注丰富的通用领域(源领域)进行知识共享，实现在标注稀疏的特定领域中(目标领域)的命名实体识别，并具有较好的识别效果。