一种页面数据采集的方法、装置及电子设备
基本信息
申请号 | CN202011249208.9 | 申请日 | - |
公开(公告)号 | CN112100547B | 公开(公告)日 | 2021-06-18 |
申请公布号 | CN112100547B | 申请公布日 | 2021-06-18 |
分类号 | G06F16/957;G06K9/00 | 分类 | 计算;推算;计数; |
发明人 | 张雪冬;左英杰 | 申请(专利权)人 | 北京数智新天信息技术咨询有限公司 |
代理机构 | 北京集佳知识产权代理有限公司 | 代理人 | 柳欣 |
地址 | 100040 北京市石景山区鲁谷路74号中国瑞达大厦18层M1805、M1807、M1809室 | ||
法律状态 | - |
摘要
摘要 | 本发明提供了一种页面数据采集的方法、装置及电子设备,其中,该方法包括:基于浏览器执行登录目标网页的登录操作;在登录成功之后,基于光学字符识别技术,从浏览器的开发工具中定位到cookie字段;根据cookie信息并行访问与目标网页相关的页面网络地址,采集所有页面网络地址中的数据并保存。通过本发明实施例提供的页面数据采集的方法、装置及电子设备,基于cookie信息在访问与目标网页相关的页面网络地址时,不需要重复登录操作,从而可以并行访问多个页面网络地址,不需要等待浏览器一次次加载页面,能够一次性获取到多个页面的数据,可以快速采集数据,提高数据采集的效率;且该方法可以自动实现登录操作、采集操作等,能够节约人力成本。 |
