用于实现低代码配置化ETL数据转换的平台系统、方法、装置、处理器及计算机存储介质

基本信息

申请号 CN202111345731.6 申请日 -
公开(公告)号 CN114064240A 公开(公告)日 2022-02-18
申请公布号 CN114064240A 申请公布日 2022-02-18
分类号 G06F9/48(2006.01)I;G06F9/50(2006.01)I;G06F9/448(2018.01)I;G06F11/30(2006.01)I;G06F16/25(2019.01)I 分类 计算;推算;计数;
发明人 俞枫;任志浩;陈雨忱 申请(专利权)人 国泰君安证券股份有限公司
代理机构 上海智信专利代理有限公司 代理人 王洁;郑暄
地址 200041上海市静安区南京西路768号国泰君安大厦20层
法律状态 -

摘要

摘要 本发明涉及一种用于实现低代码配置化ETL数据转换的平台系统,其中,该系统包括:任务生成器处理模块,用于根据用户定义的执行计划生成执行任务;任务调度器处理模块,用于根据执行任务的要求选择注册的任务执行器;任务执行器处理模块,用于接收任务调度器提交的任务,并根据执行参数执行资源库里的作业或转换;平台监视器处理模块,用于实时监控任务的执行情况以及各个组件的健康情况;资源库处理模块,用于进行存放作业及转换。本发明还涉及相应的方法、装置、处理器及其存储介质。采用了本发明的上述技术方案,通过开发可视化的任务配置功能,能够减少使用人员的学习成本;并且通过配置参数复用公共组件,能够有效的减少重复开发。