爬架数据清理方法、爬架控制装置及存储介质

基本信息

申请号 CN202110770958.9 申请日 -
公开(公告)号 CN113535697A 公开(公告)日 2021-10-22
申请公布号 CN113535697A 申请公布日 2021-10-22
分类号 G06F16/215 分类 计算;推算;计数;
发明人 周剑;陶建伟;耿金鹏;陈宜椿 申请(专利权)人 广州三叠纪元智能科技有限公司
代理机构 深圳市力道知识产权代理事务所(普通合伙) 代理人 何姣
地址 510700 广东省广州市黄埔区科学大道182号C1区601
法律状态 -

摘要

摘要 本申请实施例公开了一种爬架数据清理方法、爬架控制装置及存储介质,爬架数据清理方法包括:获取待处理数据及待处理数据的类型,待处理数据携带有数据源标识和时间标签,待处理数据的类型包括爬架控制装置存储空间的数据和待存储的数据;根据类型和数据源标识为待处理数据配置对应的数据处理参数;根据数据处理参数和时间标签对待处理数据分别进行数据清理,得到最终数据。保证了对无效数据的清理,减小了爬架控制装置的数据冗余,增加了爬架控制装置的处理速度,同时避免有效数据被错误清理,从而导致爬架控制装置不能准确记录并分析爬架状态的情况。