一种数据处理方法及数据处理平台

基本信息

申请号 CN201710007813.7 申请日 -
公开(公告)号 CN107103025B 公开(公告)日 2017-08-29
申请公布号 CN107103025B 申请公布日 2017-08-29
分类号 G06F16/25(2019.01)I 分类 -
发明人 王全胜;汪超;冯文;冯海军 申请(专利权)人 北京艾瑞数智科技有限公司
代理机构 北京集佳知识产权代理有限公司 代理人 亚信科技(中国)有限公司
地址 100193北京市海淀区西北旺东路10号院东区19号楼1层101
法律状态 -

摘要

摘要 本发明提供一种数据处理方法及数据处理平台,从数据库中采集至少一个元数据,并确定元数据在数据仓库中所属层次以及在所属层次下的所属分类,这样在采集到元数据下的数据后,可以将至少一个元数据下的数据的格式转换为数据处理平台预先设定的格式,并将转换格式后的数据存储到对应的数据库表中,而数据库表对应一个元数据对应字段的属性信息,因此可根据元数据将元数据下的数据存储到对应的数据库表中,实现数据的分类存储,以有利于对每个分类下数据统一管理。并且还可以基于数据处理平台预先设定的数据监控规则,对至少一个元数据下的数据进行质量校验,以使得数据处理平台具有质量校验功能,进而实现对存量数据和增量数据的统一监控。