一种基于Storm分布式框架的食品安全网络舆情预警系统

基本信息

申请号 CN201611030936.4 申请日 -
公开(公告)号 CN106599065B 公开(公告)日 2019-12-13
申请公布号 CN106599065B 申请公布日 2019-12-13
分类号 G06F16/958(2019.01); G06F16/35(2019.01) 分类 计算;推算;计数;
发明人 李芳; 朱群雄; 陈凯; 江志英; 戴龙龙; 李顺子; 韩永明; 刘璐; 耿志强; 徐圆 申请(专利权)人 贵州省食品安全检测应用工程技术研究中心有限公司
代理机构 北京太兆天元知识产权代理有限责任公司 代理人 北京化工大学; 贵州省食品安全检测应用工程技术研究中心有限公司
地址 100029 北京市朝阳区北三环东路15号北京化工大学
法律状态 -

摘要

摘要 本发明公开了属于大数据处理技术领域中的一种基于storm分布式框架的食品安全网络舆情预警系统,通过爬取网络媒体的新闻网页,然后从网页文件中提取食品相关舆情信息并将其进行分布式聚类;对每个聚类结果中的舆情信息进行进一步分析以得到每个事件,并获取事件的起源、发展、高潮、结束阶段的相关信息,以达到网络监控的目的。本系统通过storm分布式框架提高了舆情数据处理的效率,解决了以往时效性较差的缺点。