一种用于处理大量数据的数据处理系统及其处理方法

基本信息

申请号 CN201710197935.7 申请日 -
公开(公告)号 CN108664788B 公开(公告)日 2021-08-24
申请公布号 CN108664788B 申请公布日 2021-08-24
分类号 G06F21/53;G06F21/55;H04L29/06 分类 计算;推算;计数;
发明人 张守义 申请(专利权)人 北京宸信征信有限公司
代理机构 北京康思博达知识产权代理事务所(普通合伙) 代理人 刘冬梅;路永斌
地址 100036 北京市海淀区复兴路甲65号-A5号楼1201室
法律状态 -

摘要

摘要 本发明公开了一种用于处理大量数据的数据处理系统及其处理方法,所述系统包括分析前处理子系统(1)、分析处理服务器(2)、存储服务器(3)和盘柜(4),所述分析前处理子系统(1)包括物理防火墙和至少两台虚拟机;所述方法如下进行:先在分析前处理子系统(1)进行分析前数据处理,然后将前处理后的数据输出至分析处理服务器(2),并在分析处理服务器(2)内进行数据分析,获得分析数据,且将分析数据输出至存储服务器(3)和盘柜(4),最后在存储服务器(3)上查询分析数据。本发明所述系统将数据分析前处理、数据分析、数据存储分别在不同的服务器上进行,这样减少了在一台物理机上的负载,进而提高了各处理过程的处理速度。