一种基于关键字加权算法的舆情热词发现方法
基本信息
申请号 | CN201610123465.5 | 申请日 | - |
公开(公告)号 | CN107153658A | 公开(公告)日 | 2017-09-12 |
申请公布号 | CN107153658A | 申请公布日 | 2017-09-12 |
分类号 | G06F17/30(2006.01)I;G06F17/27(2006.01)I | 分类 | 计算;推算;计数; |
发明人 | 赵一昕;李华康;杨天若;杨天楚 | 申请(专利权)人 | 常州市公共交通集团有限责任公司 |
代理机构 | - | 代理人 | - |
地址 | 213000 江苏省常州市新北区河海中路85号浙江大学常州工业技术学院215 | ||
法律状态 | - |
摘要
摘要 | 本发明公开了一种热词发现方法,具体涉及一种基于关键字加权算法的热词发现方法。本发明利用中文分词工具对海量的舆情信息进行初步分词,并给出词性标注,同时结合一个IDF表、一个过滤词表和一个词性权值表,依据加权式TF‑IDF算法进行候选词语热度值计算,该计算不仅仅只依据词频,而是充分考虑了词语的词性、位置等所包含的有效信息,为热词识别提供了可靠性依据。另外,本发明充分考虑了自媒体时代下舆情标题主题鲜明的特点,主要对舆情标题进行语料处理,解决了海量舆情信息下的热词识别的效率问题。最后对IDF表实现动态的增量式更新,保证了词语反文档频率的实时性,提高了热词识别的准确度。 |
