数据的清洗方法、装置、系统及计算机可读存储介质

基本信息

申请号 CN202110629498.8 申请日 -
公开(公告)号 CN113377752A 公开(公告)日 2021-09-10
申请公布号 CN113377752A 申请公布日 2021-09-10
分类号 G06F16/215(2019.01)I 分类 计算;推算;计数;
发明人 唐积益;蔡利芹;侯腾蛟 申请(专利权)人 深圳力维智联技术有限公司
代理机构 深圳市恒程创新知识产权代理有限公司 代理人 孔德丞
地址 518061广东省深圳市南山区粤海街道科苑南路3099号储能大厦六层
法律状态 -

摘要

摘要 本申请公开了一种数据的清洗方法、装置、系统及计算机可读存储介质,该方法包括:接收到终端设备发送的原始事件数据后,确定原始事件数据有效性;若确定原始事件数据有效,则基于原始事件数据生成对应的数据清洗请求;根据数据清洗请求中的参数信息确定对应的待执行清洗脚本,并基于待执行清洗脚本对原始事件数据进行数据清洗。本申请通过待执行清洗脚本对原始事件数据进行数据清洗,即数据清洗的过程中,在需要新增或者修改数据清洗业务逻辑时,用户可以在待执行清洗脚本中新增或者修改对应的数据清洗函数,而不用新增或者修改整个模块,提高了数据清洗的可配置性。