基于点互信息的词向量模型和基于CNN的文本分类方法

基本信息

申请号 CN201810938236.8 申请日 -
公开(公告)号 CN109189925A 公开(公告)日 2020-01-17
申请公布号 CN109189925A 申请公布日 2020-01-17
分类号 G06F16/35;G06N3/04;G06K9/62 分类 计算;推算;计数;
发明人 李万理;吴海明;薛云 申请(专利权)人 上海高航知识产权服务有限公司
代理机构 广州粤高专利商标代理有限公司 代理人 江裕强
地址 510006 广东省广州市番禺区外环西路378号华南师范大学物理与电信工程学院
法律状态 -

摘要

摘要 本发明公开基于点互信息的词向量模型和基于CNN的文本分类方法。该方法包括:(1)通过基于点互信息的全局词向量方法训练词向量模型;(2)根据训练好的词向量模型,确定所述文本的词向量矩阵;(3)通过CNN提取词向量矩阵中的特征,并训练分类模型;(4)根据训练好的词向量模型和CNN特征提取模型对输入文本特征提取;(5)根据CNN特征提取模型获取的文本特征,通过softmax和交叉熵方法计算文本与预设类别的映射距离,取距离最近的为文本对应类别。该方法克服了Glove词向量在语义捕捉和统计共现矩阵上的不足,降低模型训练复杂度,能够准确地挖掘出文本的分类特征,适用于各种领域的文本分类,具有极大的实用价值。