一种高性能的海量数据同步方法及装置
基本信息
申请号 | 2020111602965 | 申请日 | - |
公开(公告)号 | CN112269831A | 公开(公告)日 | 2021-01-26 |
申请公布号 | CN112269831A | 申请公布日 | 2021-01-26 |
分类号 | G06F16/27(2019.01)I; | 分类 | 计算;推算;计数; |
发明人 | 蔡永亮;廖阳春;郑广彬 | 申请(专利权)人 | 广州助蜂网络科技有限公司 |
代理机构 | 广州睿金泽专利代理事务所(普通合伙) | 代理人 | 宋伟文 |
地址 | 510635广东省广州市天河区龙口横街28号东塔26楼自编2601单元 | ||
法律状态 | - |
摘要
摘要 | 本发明公开了一种高性能的海量数据同步方法,包括:获取物联网卡的过去状态数据;根据所述过去状态数据,配置数据同步策略;根据所述过去状态数据和数据同步策略,计算同步频率,得到同步频率列表;根据所述同步频率列表,通过运营商接口获取所述物联网卡的实时状态数据;所述实时状态数据通过Redis进行数据过滤,将过滤后的所述实时状态数据写入数据库。还公开了使用该方法的一种装置。本发明通过配置不同的同步策略和缓冲策略,提高数据的同步效率、灵活性和实时性,大幅度降低同步数据对业务系统和数据库的压力。 |
