一种云计算平台及其调度、数据分析方法及系统

基本信息

申请号 CN202010511914.X 申请日 -
公开(公告)号 CN111708932A 公开(公告)日 2020-09-25
申请公布号 CN111708932A 申请公布日 2020-09-25
分类号 G06F16/951(2019.01)I 分类 计算;推算;计数;
发明人 周康;董岩;闫强;石凯;武铁军 申请(专利权)人 中联云港数据科技股份有限公司
代理机构 北京国谦专利代理事务所(普通合伙) 代理人 中联云港数据科技股份有限公司
地址 100029北京市朝阳区安翔北里甲11号北京创业大厦B座12层
法律状态 -

摘要

摘要 本发明属于网络技术领域,公开了一种云计算平台及其调度、数据分析方法及系统,所述云计算平台及其调度、数据分析系统包括:数据采集模块、数据聚类模块、安全检测模块、数据传输模块、云计算平台、数据调度模块、数据分析模块、云存储模块、显示模块。本发明通过数据采集模块执行网页抓取和/或网站抓取,支持全网数据的抓取,具备极高地通用性,降低了维护和运营成本,提高了抓取有效数据的可靠性。通过安全检测模块对采集得到的数据集进行安全检测,保证了云计算平台的安全性;对云计算中心的数据存储方式和处理方式进行改进,提高了云计算平台中数据存储的可靠性,保证了云节点之间负载均衡,有效的提高了云计算平台的应用处理性能。