基于pythonQT及智能算法的快速规则定制方法
基本信息
| 申请号 | CN201811019150.1 | 申请日 | - |
| 公开（公告）号 | CN109271145B | 公开（公告）日 | 2021-12-14 |
| 申请公布号 | CN109271145B | 申请公布日 | 2021-12-14 |
| 分类号 | G06F8/20（2018.01）I;G06F16/9535（2019.01）I;G06F16/954（2019.01）I | 分类 | 计算；推算；计数; |
| 发明人 | 邢航;李森;汪明 | 申请（专利权）人 | 科大国创软件股份有限公司 |
| 代理机构 | 上海精晟知识产权代理有限公司 | 代理人 | 冯子玲 |
| 地址 | 230000安徽省合肥市高新区文曲路355号 | ||
| 法律状态 | - | ||
摘要
| 摘要 | 本发明公开了基于pythonQT及智能算法的快速规则定制方法，涉及网页规则定制技术领域。本发明包括输入待爬取页面的URL，客户端通过URL加载页面；基于selenium提取页面中导航列表项；通过智能算法提取详情页正文部分；通过js技术从页面中获取页面元素规则，返回客户端；规则上传服务端，后台爬虫程序根据规则进行爬取。本发明通过selenium提取页面中导航列表项并过滤掉纵坐标大于浏览器高度的 |
