适用于MySQL中客户数据的并行异构方法、系统、介质及设备

基本信息

申请号 CN202010176448.4 申请日 -
公开(公告)号 CN111414363A 公开(公告)日 2020-07-14
申请公布号 CN111414363A 申请公布日 2020-07-14
分类号 G06F16/22(2019.01)I;G06F16/2457(2019.01)I 分类 -
发明人 姚维召;杜川 申请(专利权)人 上海银赛计算机科技有限公司
代理机构 上海段和段律师事务所 代理人 上海银赛计算机科技有限公司
地址 201799上海市青浦区沪青平公路1362号1幢1层C区153室
法律状态 -

摘要

摘要 本发明提供了一种适用于MySQL中客户数据的并行异构方法、系统、介质及设备,包括:环境搭建步骤:搭建可用度大于设定阈值的Canal和Elasticsearch环境;环境配置步骤:在Canal上配置需要进行数据异构处理的MySQL信息;Canal‑Consumer服务开发步骤:全量异构初始化客户设定数据;Elasticsearch索引创设步骤:提取业务需求的数据创设Mapping;并行处理步骤:按照客户主键ID,将取到的binlog操作数据放入到对应线程的队列中,线程中调用Elasticsearch对应的API完成操作。本发明使得系统代码更简洁、操作更稳定、查询速度更快。