一种基于关键字加权算法的舆情热词发现方法

基本信息

申请号 CN201610123465.5 申请日 -
公开(公告)号 CN107153658A 公开(公告)日 2017-09-12
申请公布号 CN107153658A 申请公布日 2017-09-12
分类号 G06F17/30(2006.01)I;G06F17/27(2006.01)I 分类 计算;推算;计数;
发明人 赵一昕;李华康;杨天若;杨天楚 申请(专利权)人 常州市公共交通集团有限责任公司
代理机构 - 代理人 -
地址 213000 江苏省常州市新北区河海中路85号浙江大学常州工业技术学院215
法律状态 -

摘要

摘要 本发明公开了一种热词发现方法,具体涉及一种基于关键字加权算法的热词发现方法。本发明利用中文分词工具对海量的舆情信息进行初步分词,并给出词性标注,同时结合一个IDF表、一个过滤词表和一个词性权值表,依据加权式TF‑IDF算法进行候选词语热度值计算,该计算不仅仅只依据词频,而是充分考虑了词语的词性、位置等所包含的有效信息,为热词识别提供了可靠性依据。另外,本发明充分考虑了自媒体时代下舆情标题主题鲜明的特点,主要对舆情标题进行语料处理,解决了海量舆情信息下的热词识别的效率问题。最后对IDF表实现动态的增量式更新,保证了词语反文档频率的实时性,提高了热词识别的准确度。