一种数据抓取方法及系统
基本信息
申请号 | 2020110985772 | 申请日 | - |
公开(公告)号 | CN112256940A | 公开(公告)日 | 2021-01-22 |
申请公布号 | CN112256940A | 申请公布日 | 2021-01-22 |
分类号 | G06F16/951(2019.01)I | 分类 | 计算;推算;计数; |
发明人 | 熊涛;房辉 | 申请(专利权)人 | 深圳市天维大数据技术有限公司 |
代理机构 | 成都鱼爪智云知识产权代理有限公司 | 代理人 | 赵晨宇 |
地址 | 518000广东省深圳市罗湖区桂园街道宝安南路3083号蔡屋围发展大厦205# | ||
法律状态 | - |
摘要
摘要 | 本发明公开了一种数据抓取方法,包括以下步骤:获取并发送数据抓取请求;根据数据抓取请求生成并发送数据抓取规则;根据数据抓取规则建立数据抓取任务;根据数据抓取任务设定一个或多个数据抓取节点;将数据抓取任务下发到各个数据抓取节点,通过数据抓取节点抓取数据,并将抓取的数据发送至终端。本发明还公开了一种数据抓取系统。本发明具有可对数据进行准确抓取,保证数据抓取精确度,提高数据抓取效率优点。 |
