多源异构数据的自动化治理方法及装置

基本信息

申请号 CN202210029418.X 申请日 -
公开(公告)号 CN114048108A 公开(公告)日 2022-02-15
申请公布号 CN114048108A 申请公布日 2022-02-15
分类号 G06F11/30(2006.01)I;G06F8/71(2018.01)I 分类 计算;推算;计数;
发明人 郭国龙;朱龙文;郭慧;程揭章;张海陆;田恩岳;牛纪涛;魏超 申请(专利权)人 中科星图智慧科技有限公司
代理机构 北京华专卓海知识产权代理事务所(普通合伙) 代理人 赵真;张继鑫
地址 266104山东省青岛市崂山区松岭路177号国际创新园J座17层
法律状态 -

摘要

摘要 本公开涉及数据处理技术领域,具体地,本公开的实施例提供了一种多源异构数据的自动化治理方法及装置。所述方法:包括根据用户输入的引接指令,配置数据引接任务;根据所述数据引接任务进行数据连接认证,并在认证通过后将所述数据引接任务所引入的多源异构数据传入消息队列中;根据用户输入的任务配置指令,配置数据治理任务;启动所述数据治理任务,从所述消息队列中读取与所述数据治理任务对应的数据进行数据治理;监控所述数据引接任务、所述数据治理任务以及数据治理结果。以此方式,可以实现集数据引接、任务配置、自动化治理以及监控于一体数据自动化治理方案,且能够提高数据自动化治理的效率与稳健性。