结合多因子分析技术和MapReduce技术的海量数据简化及处理系统

基本信息

申请号 CN201710352944.9 申请日 -
公开(公告)号 CN107315769B 公开(公告)日 2021-03-12
申请公布号 CN107315769B 申请公布日 2021-03-12
分类号 G06F16/2458(2019.01)I;G06F16/215(2019.01)I 分类 计算;推算;计数;
发明人 杨磊 申请(专利权)人 北京安点科技有限责任公司
代理机构 北京方圆嘉禾知识产权代理有限公司 代理人 董芙蓉
地址 100142北京市海淀区恩济庄永安里3号楼四层429室
法律状态 -

摘要

摘要 本发明涉及一种结合多因子分析技术和MapReduce技术的海量数据简化及处理系统,包括一个或数个数据采集及预处理模块、处理节点调度模块、数据处理模块、数据结果汇总模块;其中,处理节点调度模块通过有线或无线的方式分别与数据采集及预处理模块、数据处理模块连接,同时,数据处理模块通过有线或无线的方式还与数据结果汇总模块连接,本发明利用多因子分析技术对海量工业网络数据进行简化,MapReduce技术进行分布式处理,两者相结合以达到对海量数据的高效处理,及时快速的反应网络当前状态及进行威胁预判。