一种海量数据质量管理与治理的系统
基本信息
申请号 | CN201911356107.9 | 申请日 | - |
公开(公告)号 | CN113032376A | 公开(公告)日 | 2021-06-25 |
申请公布号 | CN113032376A | 申请公布日 | 2021-06-25 |
分类号 | G06F16/215;G06F16/25;G06F16/28;G06F16/34 | 分类 | 计算;推算;计数; |
发明人 | 鲁红军 | 申请(专利权)人 | 云基华海信息技术股份有限公司 |
代理机构 | - | 代理人 | - |
地址 | 710065陕西省西安市高新区高新三路2号海佳云顶商住楼10603室 | ||
法律状态 | - |
摘要
摘要 | 一种海量数据质量管理与治理的系统,系统用于将各种数据进行集中管理,对数据进行综合治理,并将治理后的数据采用数据模型服务的方式对外提供数据服务支持;其中,元数据管理模块分别依次连接于数据采集模块、数据融合模块、数据模型模块;所述数据模型模块分别连接于数据服务模块和数据可视化模块;数据采集模块经由数据清洗模块连接于数据模型模块;数据清洗模块与数据融合模块双向连接。本发明高效的数据驱动处理机制,通过监控数据变化根据制定的数据治理规则自动进行数据治理,根据硬件资源情况动态控制资源使用情况,最大限度利用硬件资源提高数据治理效率。 |
