一种数据质量检测方法及系统

基本信息

申请号 CN202110465489.X 申请日 -
公开(公告)号 CN113157745A 公开(公告)日 2021-07-23
申请公布号 CN113157745A 申请公布日 2021-07-23
分类号 G06F16/2455;G06F16/2458;G06F16/28;G06Q10/06;G06Q50/18 分类 计算;推算;计数;
发明人 蒋少剑;王杰华;蒋昆;林宁 申请(专利权)人 上海交大慧谷通用技术有限公司
代理机构 北京中政联科专利代理事务所(普通合伙) 代理人 覃毅
地址 200120 上海市浦东新区中国(上海)自由贸易试验区郭守敬路498号14幢22301-1108座
法律状态 -

摘要

摘要 本发明公开了一种数据质量检测方法及系统,该方法包括:从数据记录集中读取需要检测的数据并保存数据主键;读取预设的数据质量规则集并调用解析方法解析数据质量规则集,利用解析后的数据质量规则集对目标数据集中的数据进行逐个或批量的数据质量检测;将数据质量检测结果进行保存并汇总为质量检测报告;计算出特定的数据质量指标值,获得目标数据质量的可度量结果。本发明利用特定的业务数据质量规则和针对业务数据库设计的检测方法,实现了对源系统数据的高效的数据质量检测,支持可配置的规则设置并提供数据质量结果汇总功能,对数据质量结果进行指标计算,从而量化数据质量情况。