分布式数据库的数据处理方法、装置及系统

基本信息

申请号 CN202110109567.2 申请日 -
公开(公告)号 CN112818018A 公开(公告)日 2021-05-18
申请公布号 CN112818018A 申请公布日 2021-05-18
分类号 G06F16/2455;G06F16/2457;G06F16/27;G06F9/46 分类 计算;推算;计数;
发明人 李年 申请(专利权)人 北京海量数据技术股份有限公司
代理机构 北京尚钺知识产权代理事务所(普通合伙) 代理人 王海荣
地址 100083 北京市海淀区学院路30号科大天工大厦B座6层01室
法律状态 -

摘要

摘要 本发明提供一种分布式数据库的数据处理方法、装置及系统,该方法包括:存储节点接收协调节点发送的日志信息,并在内存中构造一个队列用于存储所述日志信息,形成日志队列;从所述日志队列中按照先进先出的次序依次读出存储的所述日志信息,将读出的所述日志信息写入硬盘;根据日志序列号排序所述日志信息,并按事务ID区分所述日志信息;解析所述日志信息中的数据改动操作,产生新的数据页;根据所述新的数据页,写入及备份数据。本发明只传输和写入日志,降低了网络及IO开销,提高了性能。