应用于大数据系统的数据质量管理系统及方法

基本信息

申请号 CN201711487081.2 申请日 -
公开(公告)号 CN108073720B 公开(公告)日 2022-03-08
申请公布号 CN108073720B 申请公布日 2022-03-08
分类号 G06F16/215(2019.01)I 分类 计算;推算;计数;
发明人 邹勇;黄静;刘明;胡章平 申请(专利权)人 广州明动软件股份有限公司
代理机构 北京商专永信知识产权代理事务所(普通合伙) 代理人 许春兰;李彬彬
地址 510000广东省广州市天河区白沙水路89号1-2层
法律状态 -

摘要

摘要 本发明公开一种应用于大数据系统的数据质量管理系统,包括应用域配置模块,用于配置待检测数据所属的应用域,生成应用域配置信息存储;数据源配置模块,用于配置待检测数据所属的数据源,生成数据源配置信息存储;管理指标配置模块,用于对数据源中的数据信息创建管理指标存储;任务执行模块,可以用于根据执行命令调用管理指标对应用域接入至数据源的数据信息进行数据检查。还包括一种应用于大数据系统的数据质量管理系统的操作方法。对于大数据环境监管平台中的环境大数据中心整合和汇集省环保厅众多系统的繁多业务数据,本发明可以针对环境大数据中心的数据进行数据检查,筛查出脏数据或异常数据,提高环境大数据中心的数据质量。