数据抓取系统、方法

基本信息

申请号 CN202011485713.3 申请日 -
公开(公告)号 CN112637049A 公开(公告)日 2021-04-09
申请公布号 CN112637049A 申请公布日 2021-04-09
分类号 H04L12/46(2006.01)I;G06F9/455(2006.01)I;H04L12/64(2006.01)I 分类 电通信技术;
发明人 石忠民;周锦裕 申请(专利权)人 广州索答信息科技有限公司
代理机构 广州市越秀区哲力专利商标事务所(普通合伙) 代理人 曾令军
地址 510000广东省广州市高新技术产业开发区科学城天泰一路1号第四层自编431房
法律状态 -

摘要

摘要 本发明提供一种数据抓取系统、方法,该数据抓取系统包括:服务器分别与交换机、客户端连接;交换机与拨号网络连接,且每个拨号网络在交换机上的对应VLAN号不同;服务器安装有至少两个虚拟操作系统,服务器通过虚拟操作系统与拨号网络连接,且每个虚拟操作系统连接的拨号网络不同,通过拨号网络访问数据源;客户端存储有动态IP池,服务器控制虚拟操作系统根据动态IP池中的IP串联访问数据源以进行数据抓取。本发明通过服务器上的多个虚拟操作系统分别连接不同的拨号网络,并利用动态IP池中的IP进行串联访问数据源,无需使用多个服务器扩展拨号网络,减少了服务运行的成本费用,且能够对不同的链接使用特定的链路进行访问,提高了数据抓取的效率。