适用于MySQL中客户数据的并行异构方法、系统、介质及设备
基本信息
申请号 | CN202010176448.4 | 申请日 | - |
公开(公告)号 | CN111414363A | 公开(公告)日 | 2020-07-14 |
申请公布号 | CN111414363A | 申请公布日 | 2020-07-14 |
分类号 | G06F16/22(2019.01)I;G06F16/2457(2019.01)I | 分类 | - |
发明人 | 姚维召;杜川 | 申请(专利权)人 | 上海银赛计算机科技有限公司 |
代理机构 | 上海段和段律师事务所 | 代理人 | 上海银赛计算机科技有限公司 |
地址 | 201799上海市青浦区沪青平公路1362号1幢1层C区153室 | ||
法律状态 | - |
摘要
摘要 | 本发明提供了一种适用于MySQL中客户数据的并行异构方法、系统、介质及设备,包括:环境搭建步骤:搭建可用度大于设定阈值的Canal和Elasticsearch环境;环境配置步骤:在Canal上配置需要进行数据异构处理的MySQL信息;Canal‑Consumer服务开发步骤:全量异构初始化客户设定数据;Elasticsearch索引创设步骤:提取业务需求的数据创设Mapping;并行处理步骤:按照客户主键ID,将取到的binlog操作数据放入到对应线程的队列中,线程中调用Elasticsearch对应的API完成操作。本发明使得系统代码更简洁、操作更稳定、查询速度更快。 |
