一种基于大数据的话题检测方法及装置
基本信息
申请号 | CN201310075129.4 | 申请日 | - |
公开(公告)号 | CN103177090B | 公开(公告)日 | 2016-11-23 |
申请公布号 | CN103177090B | 申请公布日 | 2016-11-23 |
分类号 | G06F17/30(2006.01)I | 分类 | 计算;推算;计数; |
发明人 | 罗峰;黄苏支;李娜 | 申请(专利权)人 | 亿赞普(北京)科技有限公司 |
代理机构 | 北京润泽恒知识产权代理有限公司 | 代理人 | 苏培华 |
地址 | 100081 北京市海淀区南大街东北旺北京中关村软件园孵化器1号楼C座三层1322-D | ||
法律状态 | - |
摘要
摘要 | 本发明提供了一种基于大数据的话题检测方法及装置,能够在互联网环境中大量网页文本快速更新的情况下,同时保证检测效果的准确性和时效性。所述的方法包括:依据用户网络行为数据抽取热点网页;采集所述热点网页的内容;依据所述热点网页的内容,提取得到所述热点网页的网页特征向量;依据所述热点网页的网页特征向量对所述热点网页进行聚类,得到相应的潜在热点话题类;以所述潜在热点话题类作为种子类,对新增网页进行增量聚类;所述新增网页包括在线网页;针对增量聚类后的潜在热点话题类,通过分析其对应的用户关注度参数,判定其是否为热点话题类。 |
