边缘计算的云环境分布式Web页面提取分析系统和方法
基本信息
申请号 | CN201911301759.2 | 申请日 | - |
公开(公告)号 | CN110941788A | 公开(公告)日 | 2020-03-31 |
申请公布号 | CN110941788A | 申请公布日 | 2020-03-31 |
分类号 | G06F16/958(2019.01)I;G06F16/951(2019.01)I | 分类 | 计算;推算;计数; |
发明人 | 张宏巍;张弋;兰志超;张森玮;王帅琪;李兆国 | 申请(专利权)人 | 山西云时代技术有限公司 |
代理机构 | 太原晋科知识产权代理事务所(特殊普通合伙) | 代理人 | 山西云时代技术有限公司 |
地址 | 030006山西省太原市小店区山西示范区太原学府园区长治路345号 | ||
法律状态 | - |
摘要
摘要 | 本发明属于网络通信技术领域;云计算存在数据丢失与泄露、共享技术漏洞、不安全的应用程序接口等安全风险,网页爬取效率低下,导致后续漏洞扫描需要大量时间,本发明提供一种边缘计算的云环境分布式Web页面提取分析系统和方法,中心管理节点根据历史爬取效率调度计算节点完成工作任务,提高资源的合理配置,对爬取策略和深度进行分析并去重,在保证漏洞扫描结果正确前提下,有效提高网站的爬取速度,便于扫描能力的横向扩展和计算资源的合理利用,边缘计算带来了更快的传输和响应速度,解决了传统云计算系统中节点的计算资源浪费问题,提高产能比,资源利用率明显提高。 |
