一种大数据分析系统及其应用方法

基本信息

申请号 CN201910985540.2 申请日 -
公开(公告)号 CN110716986B 公开(公告)日 2021-05-04
申请公布号 CN110716986B 申请公布日 2021-05-04
分类号 G06F16/27;G06F16/2458;G06F16/21 分类 计算;推算;计数;
发明人 袁思静 申请(专利权)人 华普通用技术研究(广州)有限公司
代理机构 东莞市创益专利事务所 代理人 李卫平
地址 518000 广东省深圳市龙岗区坂田街道五和社区光雅园工业园一区2号厂房二楼、三楼
法律状态 -

摘要

摘要 本发明实施例公开了一种大数据分析系统,包括数据采集模块、容量监控单元、数据库分配单元、数据导入模块、排序整合单元和数据统计分析模块,应用方法具体为:对每个客户端对应分配多个数据库,并将多个数据库分为主数据库和备用数据库;实时监控主数据库和多个备用数据库在数据采集时的速率和剩余容量;循环更换主数据库和多个备用数据库的使用,限制每个数据库的使用体积;主数据库和多个备用数据库的数据传送到分布式存储库,主数据库和备用数据库的数据按照时间先后顺序排列;对数据按照顺序汇总分析;本方案及时转移到备用数据库进数据采集,在将前端数据库的数据导入传输到分布式数据库时,可分段式的将数据传输,提高传输的效率。