一种日志处理方法、装置及系统

基本信息

申请号 CN202010135018.8 申请日 -
公开(公告)号 CN111404726B 公开(公告)日 2021-09-07
申请公布号 CN111404726B 申请公布日 2021-09-07
分类号 H04L12/24;H04L29/08 分类 电通信技术;
发明人 孟维良 申请(专利权)人 北京创世云科技股份有限公司
代理机构 北京集佳知识产权代理有限公司 代理人 柳欣
地址 100085 北京市海淀区上地信息路2号(北京实创高科技发展总公司2-2号D栋1-8层)八层804室
法律状态 -

摘要

摘要 本发明提供了一种日志处理方法、装置及系统,其中,该方法包括:主动拉取待处理的目标日志文件,并指示将目标日志文件标为被拉取状态;对目标日志文件进行处理,确定处理后的日志处理结果;将日志处理结果存储至本地,和/或将日志处理结果发送至相应的日志存储服务器。通过本发明实施例提供的日志处理方法、装置及系统,可以采用批量处理文件的方式对日志数据进行处理,能充分利用本地处理设备的设备性能,对于处理大文件型数据时性能有提升;本地处理设备可以基于自身的性能拉取适量的日志文件,不要求各个处理设备的配置或性能相似,提高了系统整体性能,不需要额外设置数据队列等节点,能够节约资源。