数据抓取系统、方法
基本信息
申请号 | CN202011485713.3 | 申请日 | - |
公开(公告)号 | CN112637049A | 公开(公告)日 | 2021-04-09 |
申请公布号 | CN112637049A | 申请公布日 | 2021-04-09 |
分类号 | H04L12/46(2006.01)I;G06F9/455(2006.01)I;H04L12/64(2006.01)I | 分类 | 电通信技术; |
发明人 | 石忠民;周锦裕 | 申请(专利权)人 | 广州索答信息科技有限公司 |
代理机构 | 广州市越秀区哲力专利商标事务所(普通合伙) | 代理人 | 曾令军 |
地址 | 510000广东省广州市高新技术产业开发区科学城天泰一路1号第四层自编431房 | ||
法律状态 | - |
摘要
摘要 | 本发明提供一种数据抓取系统、方法,该数据抓取系统包括:服务器分别与交换机、客户端连接;交换机与拨号网络连接,且每个拨号网络在交换机上的对应VLAN号不同;服务器安装有至少两个虚拟操作系统,服务器通过虚拟操作系统与拨号网络连接,且每个虚拟操作系统连接的拨号网络不同,通过拨号网络访问数据源;客户端存储有动态IP池,服务器控制虚拟操作系统根据动态IP池中的IP串联访问数据源以进行数据抓取。本发明通过服务器上的多个虚拟操作系统分别连接不同的拨号网络,并利用动态IP池中的IP进行串联访问数据源,无需使用多个服务器扩展拨号网络,减少了服务运行的成本费用,且能够对不同的链接使用特定的链路进行访问,提高了数据抓取的效率。 |
