一种基于大数据的数据治理系统及其治理方法

基本信息

申请号 CN202011407979.6 申请日 -
公开(公告)号 CN112506905A 公开(公告)日 2021-03-16
申请公布号 CN112506905A 申请公布日 2021-03-16
分类号 G06F16/215(2019.01)I;G06F16/25(2019.01)I 分类 计算;推算;计数;
发明人 赵越;罗慧;魏清 申请(专利权)人 江苏中堃数据技术有限公司
代理机构 北京汇捷知识产权代理事务所(普通合伙) 代理人 赵艳
地址 210024江苏省南京市上海路215号
法律状态 -

摘要

摘要 本发明公开了一种基于大数据的数据治理系统,数据采集模块、数据规范处理模块、存储模块、人工处理模块、数据分区模块、分发处理模块、处理结果汇总模块、数据校核模块和数据输出模块,本发明还提供了上述基于大数据的数据治理系统的制备方法,包括待处理数据的采集、对待处理数据进行规范处理和存储、将规范数据进行分区处理、将分区后的规范数据分别发送至子服务器中并进行单独处理并汇总在总服务器上以及对汇总后的数据进行校核并将校核后的数据输出,本发明通过把格式不符或内容确实的数据进行分类治理,来提高了数据计算的准确率,在治理数据的同时完成了对数据的初步分类计算,为后面的计算时间节省了时间,从而提高了数据处理的效率。