一种海量数据质量管理与治理的系统

基本信息

申请号 CN201911356107.9 申请日 -
公开(公告)号 CN113032376A 公开(公告)日 2021-06-25
申请公布号 CN113032376A 申请公布日 2021-06-25
分类号 G06F16/215;G06F16/25;G06F16/28;G06F16/34 分类 计算;推算;计数;
发明人 鲁红军 申请(专利权)人 云基华海信息技术股份有限公司
代理机构 - 代理人 -
地址 710065陕西省西安市高新区高新三路2号海佳云顶商住楼10603室
法律状态 -

摘要

摘要 一种海量数据质量管理与治理的系统,系统用于将各种数据进行集中管理,对数据进行综合治理,并将治理后的数据采用数据模型服务的方式对外提供数据服务支持;其中,元数据管理模块分别依次连接于数据采集模块、数据融合模块、数据模型模块;所述数据模型模块分别连接于数据服务模块和数据可视化模块;数据采集模块经由数据清洗模块连接于数据模型模块;数据清洗模块与数据融合模块双向连接。本发明高效的数据驱动处理机制,通过监控数据变化根据制定的数据治理规则自动进行数据治理,根据硬件资源情况动态控制资源使用情况,最大限度利用硬件资源提高数据治理效率。