一种基于url字符串的数据采集方法
基本信息
申请号 | CN201710440457.8 | 申请日 | - |
公开(公告)号 | CN107330004A | 公开(公告)日 | 2017-11-07 |
申请公布号 | CN107330004A | 申请公布日 | 2017-11-07 |
分类号 | G06F17/30(2006.01)I | 分类 | 计算;推算;计数; |
发明人 | 马建军 | 申请(专利权)人 | 上海连源信息科技有限公司 |
代理机构 | 上海唯源专利代理有限公司 | 代理人 | 上海连源信息科技有限公司 |
地址 | 200000 上海市杨浦区闵杨树浦路2300号1B层B05-7室 | ||
法律状态 | - |
摘要
摘要 | 一种基于url字符串的数据采集方法,通过采集系统在互联网上采集符合用户需求的数据,包括:a.采集系统基于用户的输入生成至少一个url链接及至少一个url链接配置内容;b.采集系统基于用户的输入生成至少一个核心字段以及至少一个核心字段配置内容;c.采集系统基于url链接、url链接配置、核心字段以及核心字段配置内容生成采集规则并基于采集规则采集数据。本发明通过用户输入获取url链接、url链接配置内容、核心字段及核心字段配置内容,基于url链接、url链接配置、核心字段以及核心字段配置内容生成采集规则并基于采集规则采集数据到指定系统,本发明操作简单、通过灵活多变的采集规则、完善的筛选功能,实现了多元化的数据采集,具有极高的商业价值。 |
