一种智能化网络信息采集系统及采集方法

基本信息

申请号 CN202010883237.4 申请日 -
公开(公告)号 CN112182462A 公开(公告)日 2021-01-05
申请公布号 CN112182462A 申请公布日 2021-01-05
分类号 G06F16/958(2019.01)I 分类 计算;推算;计数;
发明人 尤媛媛;李梁 申请(专利权)人 镇江智越智能科技有限公司
代理机构 北京欣鼎专利代理事务所(普通合伙) 代理人 王阳虹
地址 212000江苏省镇江市高新区南徐大道298号C座501室
法律状态 -

摘要

摘要 本发明公开了一种智能化网络信息采集系统及采集方法,包括网络服务器、任务管理器、任务分配器和信息采集器,所述网络服务器与网页数据提取器连接,所述网页数据提取器与任务管理器连接,所述任务管理器与任务分配器连接,所述任务分配器与信息采集器连接;所述网络服务器用于根据web协议获取网页中的图片和文字数据;所述网页数据提取器用于提取网页中的图片和文字数据。本发明智能化的网络信息采集系统可参考信息采集服务器当前的任务分配及完成情况,针对常用网页的访问量执行任务分配工作,从而提高了信息采集效率,并且仅存储常用网页的数据,极大地节省了硬件和网络资源,保存的页面也由于数量少而更新快,有利于人们的使用。