一种数据抓取方法及系统

基本信息

申请号 2020110985772 申请日 -
公开(公告)号 CN112256940A 公开(公告)日 2021-01-22
申请公布号 CN112256940A 申请公布日 2021-01-22
分类号 G06F16/951(2019.01)I 分类 计算;推算;计数;
发明人 熊涛;房辉 申请(专利权)人 深圳市天维大数据技术有限公司
代理机构 成都鱼爪智云知识产权代理有限公司 代理人 赵晨宇
地址 518000广东省深圳市罗湖区桂园街道宝安南路3083号蔡屋围发展大厦205#
法律状态 -

摘要

摘要 本发明公开了一种数据抓取方法,包括以下步骤:获取并发送数据抓取请求;根据数据抓取请求生成并发送数据抓取规则;根据数据抓取规则建立数据抓取任务;根据数据抓取任务设定一个或多个数据抓取节点;将数据抓取任务下发到各个数据抓取节点,通过数据抓取节点抓取数据,并将抓取的数据发送至终端。本发明还公开了一种数据抓取系统。本发明具有可对数据进行准确抓取,保证数据抓取精确度,提高数据抓取效率优点。