ETL数据同步方法及装置、电子设备、存储介质
基本信息
申请号 | CN202011103171.9 | 申请日 | - |
公开(公告)号 | CN112291312B | 公开(公告)日 | 2022-07-01 |
申请公布号 | CN112291312B | 申请公布日 | 2022-07-01 |
分类号 | H04L67/06(2022.01)I;H04L67/565(2022.01)I;H04L67/30(2022.01)I;H04L67/1095(2022.01)I;G06F16/25(2019.01)I;G06F16/27(2019.01)I | 分类 | 电通信技术; |
发明人 | 褚占峰;郑高;江峰;陈世兴 | 申请(专利权)人 | 杭州数梦工场科技有限公司 |
代理机构 | 北京博思佳知识产权代理有限公司 | 代理人 | - |
地址 | 310024浙江省杭州市转塘科技经济区块16号4幢326室 | ||
法律状态 | - |
摘要
摘要 | 本申请提供一种ETL数据同步方法及装置、电子设备、存储介质;该方法应用于下游ETL服务器,该方法可以包括以下步骤:获取上游ETL服务器发送的经由网闸转发的配置文件,所述配置文件由所述上游ETL服务器根据预设转换规则对ETL任务进行转换得到;获取所述上游ETL服务器发送的经由网闸转发的传输文件,所述传输文件由所述上游ETL服务器根据所述ETL任务对待同步数据进行格式转换得到;通过所述预设转换规则将所述配置文件解析为ETL任务,并通过解析得到的ETL任务将所述传输文件还原为所述待同步数据。通过本申请的技术方案,下游ETL服务器可以基于接收到的配置文件自动生成ETL任务,避免了相关技术中需在网闸两侧的ETL服务器分别配置ETL任务而造成的操作繁琐的问题。 |
