边缘计算的云环境分布式Web页面提取分析系统和方法

基本信息

申请号 CN201911301759.2 申请日 -
公开(公告)号 CN110941788A 公开(公告)日 2020-03-31
申请公布号 CN110941788A 申请公布日 2020-03-31
分类号 G06F16/958(2019.01)I;G06F16/951(2019.01)I 分类 计算;推算;计数;
发明人 张宏巍;张弋;兰志超;张森玮;王帅琪;李兆国 申请(专利权)人 山西云时代技术有限公司
代理机构 太原晋科知识产权代理事务所(特殊普通合伙) 代理人 山西云时代技术有限公司
地址 030006山西省太原市小店区山西示范区太原学府园区长治路345号
法律状态 -

摘要

摘要 本发明属于网络通信技术领域;云计算存在数据丢失与泄露、共享技术漏洞、不安全的应用程序接口等安全风险,网页爬取效率低下,导致后续漏洞扫描需要大量时间,本发明提供一种边缘计算的云环境分布式Web页面提取分析系统和方法,中心管理节点根据历史爬取效率调度计算节点完成工作任务,提高资源的合理配置,对爬取策略和深度进行分析并去重,在保证漏洞扫描结果正确前提下,有效提高网站的爬取速度,便于扫描能力的横向扩展和计算资源的合理利用,边缘计算带来了更快的传输和响应速度,解决了传统云计算系统中节点的计算资源浪费问题,提高产能比,资源利用率明显提高。