语义效果评估方法以及相关装置
基本信息
| 申请号 | CN202111599467.9 | 申请日 | - |
| 公开（公告）号 | CN114492461A | 公开（公告）日 | 2022-05-13 |
| 申请公布号 | CN114492461A | 申请公布日 | 2022-05-13 |
| 分类号 | G06F40/35（2020.01）I;G06F40/146（2020.01）I;G06F40/143（2020.01）I;G06N3/04（2006.01）I | 分类 | 计算；推算；计数; |
| 发明人 | 段纪丁;杜倩云;李繁;赵敏志;朱成军;程大龙 | 申请（专利权）人 | 科大讯飞华南人工智能研究院（广州）有限公司 |
| 代理机构 | 深圳市威世博知识产权代理事务所（普通合伙） | 代理人 | - |
| 地址 | 510000广东省广州市南沙区丰泽东路106号（自编1号楼）X1301-G5145 | ||
| 法律状态 | - | ||
摘要
| 摘要 | 本申请公开了一种语义效果评估方法以及相关装置，该语义效果评估方法包括：获得待评估对话；其中，待评估对话中包括与用户意图相关的预测文本；将待评估对话输入至多轮对话测试集，利用多轮对话测试集对待评估对话中不同节点的预测文本进行验证；响应于待评估对话中存在至少一个识别错误的错误节点，基于多轮对话测试集对待评估对话中错误节点之后的内容进行重构以获得第一对话；基于第一对话中的所有节点对第一对话进行评估。这样可以采用离线方式对语义效果进行验证，并且在测试过程中遇到语义识别错误的节点时，实时重构错误节点之后的剩余部分，从而能够继续流入到下一节点对下一句对话进行评估，最终完整实现对所有节点语义效果的评估。 |
