自动化数据质量检验的方法、装置、设备和存储介质
基本信息
申请号 | CN202110509045.1 | 申请日 | - |
公开(公告)号 | CN113127471A | 公开(公告)日 | 2021-07-16 |
申请公布号 | CN113127471A | 申请公布日 | 2021-07-16 |
分类号 | G06F16/215(2019.01)I | 分类 | 计算;推算;计数; |
发明人 | 黄夫龙;曹峰 | 申请(专利权)人 | 数库(上海)科技有限公司 |
代理机构 | 上海十蕙一兰知识产权代理有限公司 | 代理人 | 刘秋兰 |
地址 | 201112上海市闵行区陈行路2388号9号楼8层801室 | ||
法律状态 | - |
摘要
摘要 | 本发明属于大数据技术领域,具体涉及一种自动化数据质量检验的方法、装置、设备和存储介质。其中方法包括:触发质检服务,获取数据特征,根据数据特征获取多条预设的质检规则,通过预设的数据查询方式获取需要质检的数据;执行每条质检规则,分别校验数据,得到质检结果并存储;将质检结果进行展示。本发明通过自定义配置质检规则基本解决了大部分生产数据的质检需求,在整个数据生产链路中,接入本发明后,质检成本更低,质检效率和质量则大幅度提升。 |
