数据查重方法和数据查重装置
基本信息
申请号 | CN201910053375.7 | 申请日 | - |
公开(公告)号 | CN111459931A | 公开(公告)日 | 2020-07-28 |
申请公布号 | CN111459931A | 申请公布日 | 2020-07-28 |
分类号 | G06F16/22(2019.01)I;G06F16/2455(2019.01)I | 分类 | - |
发明人 | 李丽 | 申请(专利权)人 | 中车信息技术有限公司 |
代理机构 | 北京众泽信达知识产权代理事务所(普通合伙) | 代理人 | 中车信息技术有限公司 |
地址 | 100084北京市海淀区清华大学华业大厦三区四层 | ||
法律状态 | - |
摘要
摘要 | 本发明公开了一种数据查重方法和数据查重装置。该数据查重方法应用于包括源数据库、客户端、缓存、结果存储数据库的系统,所述方法包括:在第一时刻,获取针对待查重数据的查重请求,所述待查重数据具有唯一标识;针对所述待查重数据,判断所述结果存储数据库中是否存在对应的唯一标识;当判断所述唯一标识存在时,获取该唯一标识对应的查重时刻;获取查重时刻到第一时刻之间的源数据库中的变化数据,与所述待查重数据进行查重比对;将查重比对结果存储至所述结果存储数据库中。本发明能够提高数据查重效率,既能保证查重准确性高,又能同时适用于首次查重和后续多次再查重,即能够保证在首次查重和业务流程过中的多次再查重提高效率。 |
