一种主机运维分析方法
基本信息
申请号 | CN201810123762.9 | 申请日 | - |
公开(公告)号 | CN110119343A | 公开(公告)日 | 2019-08-13 |
申请公布号 | CN110119343A | 申请公布日 | 2019-08-13 |
分类号 | G06F11/34 | 分类 | 计算;推算;计数; |
发明人 | 沈杰华 | 申请(专利权)人 | 上海鼎茂信息技术有限公司 |
代理机构 | 上海宏京知识产权代理事务所(普通合伙) | 代理人 | 上海鼎茂信息技术有限公司 |
地址 | 201501 上海市金山区枫泾商城芙蓉一村6号楼206室 | ||
法律状态 | - |
摘要
摘要 | 本发明涉及一种主机运维分析方法,服务器包括数据采集模块、实时流处理模块、数据存储检索分析模块、WEB服务模块,数据采集模块包括Flume数据采集传输模块、Kafka数据采集分发模块,包括过程:Flume数据采集传输模块采集主机的SMF数据、日志类数据经聚合后传输给HDFS分布式文件系统,Kafka数据采集分发模块将收到的数据经实时流处理后传送给HBase数据库,数据存储检索分析模块将收到的主机运维数据进行分析、整理后创建数据搜索引擎供WEB服务模块调取使用。本发明采用Flume结合Kafka的数据采集和分发模式,具有数据整合以及运维效率高的特点。 |
