一种确定文本特征的方法及装置
基本信息
| 申请号 | CN201911223218.2 | 申请日 | - |
| 公开（公告）号 | CN112906386A | 公开（公告）日 | 2021-06-04 |
| 申请公布号 | CN112906386A | 申请公布日 | 2021-06-04 |
| 分类号 | G06F40/289;G06F40/284;G06F16/35 | 分类 | 计算；推算；计数; |
| 发明人 | 林建明;代宇 | 申请（专利权）人 | 深圳无域科技技术有限公司 |
| 代理机构 | 深圳智汇远见知识产权代理有限公司 | 代理人 | 田俊峰 |
| 地址 | 518057 广东省深圳市南山区粤海街道科技园社区科苑路15号科兴科学园B栋B4-902 | ||
| 法律状态 | - | ||
摘要
| 摘要 | 本发明提供了一种确定文本特征的方法及装置，属于计算机技术领域。该方法包括：确定样本文本对应的分词集合、以及分词集合中每个分词的词向量；基于预设的分词合并规则和分词集合包含的分词，确定分词组合，并根据各分词组合包含的分词的词向量，确定各分词组合的词向量；根据确定出的分词组合的词向量，计算分词组合之间的相关度、以及各分词组合的区分度；在分词组合中，确定与其他分词组合不满足预设相关度条件、且区分度大于第一预设阈值的目标分词组合；根据确定出的分词的词向量、目标分词组合的词向量，确定各样本文本对应的特征向量。采用本发明，可以提高模型的训练效果。 |
