IT系统运维监控数据辅助预处理方法和系统

基本信息

申请号 CN201811545056.X 申请日 -
公开(公告)号 CN109766254A 公开(公告)日 2019-05-17
申请公布号 CN109766254A 申请公布日 2019-05-17
分类号 G06F11/34(2006.01)I 分类 计算;推算;计数;
发明人 陈劭力; 王巍 申请(专利权)人 上海华讯网络系统有限公司
代理机构 上海段和段律师事务所 代理人 上海华讯网络系统有限公司
地址 201203 上海市浦东新区碧波路456号A109-1室
法律状态 -

摘要

摘要 本发明提供一种IT系统运维监控数据的辅助预处理方法和系统,基于Hadoop采集运维监控数据,将运维监控数据以文件形式进行存储,得到原文件数据;判断原文件数据的各条数据条目的长度是否一致,若长度一致,则将所述数据条目定义为协议类数据;若长度不一致,则将所述数据条目定义为日志类数据;对协议类数据、日志类数据分别进行预处理,得到预处理结果数据;展示预处理结果数据、原文件数据,供运维人员按需调整。可适用于各类IT系统运维监控数据,减少运维人员在对数据进行人工解析过程中对专家的依赖度;易于实现,复杂度不高,且随着数据样本数的增多能够不断获得更精确的预处理结果,以辅助运维人员做进一步的数据处理。