一种文本相似度计算方法、装置、计算机设备和存储介质
基本信息
申请号 | CN202110431440.2 | 申请日 | - |
公开(公告)号 | CN113076404A | 公开(公告)日 | 2021-07-06 |
申请公布号 | CN113076404A | 申请公布日 | 2021-07-06 |
分类号 | G06F16/33(2019.01)I;G06F40/289(2020.01)I | 分类 | 计算;推算;计数; |
发明人 | 黄友福;肖龙源;李稀敏 | 申请(专利权)人 | 厦门快商通科技股份有限公司 |
代理机构 | 厦门市首创君合专利事务所有限公司 | 代理人 | 连耀忠;李艾华 |
地址 | 361000福建省厦门市软件园三期诚毅北大街63号1301单元 | ||
法律状态 | - |
摘要
摘要 | 本发明公开了一种文本相似度计算方法、装置、计算机设备和存储介质,方法包括:计算第一待匹配语句和第二待匹配语句间的基础相似度;对第一待匹配语句和第二待匹配语句进行分词,并对分词后的所有单词进行词性标注;分别对第一待匹配语句和第二待匹配语句分词后的所有单词进行向量化以获得词向量;计算相似度惩罚系数;基于基础相似度和相似度惩罚系数,获得第一待匹配语句和第二待匹配语句间的最终相似度。本发明在计算文本间相似度时引入了与单个词向量及词性种类相关的相似度惩罚系数,能够有效降低相似度识别错误的概率。 |
