大数据处理方法与系统

基本信息

申请号 CN201810063235.3 申请日 -
公开(公告)号 CN108268645A 公开(公告)日 2018-07-10
申请公布号 CN108268645A 申请公布日 2018-07-10
分类号 G06F17/30 分类 计算;推算;计数;
发明人 吴源智;刘海平;敖月;张芦 申请(专利权)人 广州南方人才资讯科技有限公司
代理机构 广州华进联合专利商标代理有限公司 代理人 广州南方人才资讯科技有限公司
地址 510000 广东省广州市天河区天河路198号(8层)
法律状态 -

摘要

摘要 本发明涉及一种大数据处理方法与系统。大数据处理方法通过对获取到的标准原始数据进行分布式存储,得到待挖掘数据;标准化数据预处理待挖掘数据,得到标准挖掘数据,并基于预设分析模型进行处理,获得可视化成品数据;运用分布式存储、标准化数据预处理以及分析模型,以较低的硬件成本,对数据进行精炼、存储,提高大数据挖掘的效率与质量采用分析模型从多个角度对数据进行挖掘,得到相应的可视化成品数据;实现了高效可靠的大数据存储、处理与分析,弱化了数据库性能对海量数据统计计算与展示的影响。