公开(公告)号：CN116701961B

公开(公告)日：2023-10-20

申请号：CN202310973916.4

申请日：2023-08-04

Applicant: 北京语言大学

Inventor： 李炜 ,  邵艳秋 ,  董立成 ,  申资卓 ,  杜彦融

IPC: G06F18/22 ,  G06F40/58 ,  G06F40/289

Abstract: 本发明涉及自然语言处理技术领域，公开了一种对文言文机器翻译结果自动评估的方法和系统，包括：构建待评价数据集；对待评价数据集进行预处理和分词处理；从待评价数据集中获取训练语料的原文和参考译文，利用待评估的文言文机器翻译模型对原文进行翻译，再将得到的目标译文与参考译文和原文对比并进行人工分析，按照原文‑参考译文‑目标译文‑人工打分的方式构建测试数据集；计算参考译文和目标译文的相似度，根据测试数据集计算目标译文的忠实度、流畅度、通俗度三个维度的分数，并计算目标译文的平均分、误差以及相关性，对目标译文进行自动评分；通过赋予忠实度和流畅度权重值，以计算总分数。

公开(公告)号：CN116701961A

公开(公告)日：2023-09-05

申请号：CN202310973916.4

申请日：2023-08-04

Applicant: 北京语言大学

Inventor： 李炜 ,  邵艳秋 ,  董立成 ,  申资卓 ,  杜彦融

IPC: G06F18/22 ,  G06F40/58 ,  G06F40/289

Abstract: 本发明涉及自然语言处理技术领域，公开了一种对文言文机器翻译结果自动评估的方法和系统，包括：构建待评价数据集；对待评价数据集进行预处理和分词处理；从待评价数据集中获取训练语料的原文和参考译文，利用待评估的文言文机器翻译模型对原文进行翻译，再将得到的目标译文与参考译文和原文对比并进行人工分析，按照原文‑参考译文‑目标译文‑人工打分的方式构建测试数据集；计算参考译文和目标译文的相似度，根据测试数据集计算目标译文的忠实度、流畅度、通俗度三个维度的分数，并计算目标译文的平均分、误差以及相关性，对目标译文进行自动评分；通过赋予忠实度和流畅度权重值，以计算总分数。