数据同步方法和装置
基本信息
申请号 | CN202110910853.9 | 申请日 | - |
公开(公告)号 | CN113742420A | 公开(公告)日 | 2021-12-03 |
申请公布号 | CN113742420A | 申请公布日 | 2021-12-03 |
分类号 | G06F16/27(2019.01)I;G06F16/28(2019.01)I | 分类 | 计算;推算;计数; |
发明人 | 陈孔璋;毕阳洋;段智永;林杰聪 | 申请(专利权)人 | 广州市易工品科技有限公司 |
代理机构 | 广州智斧知识产权代理事务所(普通合伙) | 代理人 | 孔德超 |
地址 | 510000广东省广州市海珠区阅江中路686号410 | ||
法律状态 | - |
摘要
摘要 | 本发明实施例涉及数据同步技术领域,公开了一种数据同步方法和装置。该方法包括:获取OLTP数据库的变更数据和/或增量数据,并将变更数据和/或增量数据存储于Kafka临时数据库的库级topic中;将变更数据和/或增量数据,以及OLTP数据库中的初始化全量数据存储到Kafka临时数据库的表级topic中;监听Kafka临时数据库,并将Kafka临时数据库同步至数据存储源中。实施本发明实施例,可以使用Kafka临时数据库实现初始化数据和变更数据的复用,同步过程高效便利。 |
