一种基于Storm分布式框架的食品安全网络舆情预警系统
基本信息
申请号 | CN201611030936.4 | 申请日 | - |
公开(公告)号 | CN106599065A | 公开(公告)日 | 2017-04-26 |
申请公布号 | CN106599065A | 申请公布日 | 2017-04-26 |
分类号 | G06F17/30(2006.01)I | 分类 | 计算;推算;计数; |
发明人 | 李芳;朱群雄;陈凯;江志英;戴龙龙;李顺子;韩永明;刘璐;耿志强;徐圆 | 申请(专利权)人 | 贵州省食品安全检测应用工程技术研究中心有限公司 |
代理机构 | 北京太兆天元知识产权代理有限责任公司 | 代理人 | 北京化工大学;贵州省食品安全检测应用工程技术研究中心有限公司 |
地址 | 100029 北京市朝阳区北三环东路15号北京化工大学 | ||
法律状态 | - |
摘要
摘要 | 本发明公开了属于大数据处理技术领域中的一种基于storm分布式框架的食品安全网络舆情预警系统,通过爬取网络媒体的新闻网页,然后从网页文件中提取食品相关舆情信息并将其进行分布式聚类;对每个聚类结果中的舆情信息进行进一步分析以得到每个事件,并获取事件的起源、发展、高潮、结束阶段的相关信息,以达到网络监控的目的。本系统通过storm分布式框架提高了舆情数据处理的效率,解决了以往时效性较差的缺点。 |
