一种分布式系统中数据传输处理与存储方法、系统及介质

基本信息

申请号 CN202210603936.8 申请日 -
公开(公告)号 CN114697372A 公开(公告)日 2022-07-01
申请公布号 CN114697372A 申请公布日 2022-07-01
分类号 H04L67/133(2022.01)I;H04L67/10(2022.01)I 分类 电通信技术;
发明人 齐泽青 申请(专利权)人 深圳市泛联信息科技有限公司
代理机构 佛山粤进知识产权代理事务所(普通合伙) 代理人 -
地址 518000广东省深圳市南山区粤海街道高新区社区科技南十二路007号九洲电器大厦B座301
法律状态 -

摘要

摘要 本发明公开了一种分布式系统中数据传输处理与存储方法、系统及介质,包括:当数据源产成数据后,生成远程过程调用发送至存储计算集群,存储计算集群收到调用后,选定任一存储计算节点作为源存储节点,通过远程内存访问读取数据源的内存并存储在集群的存储级内存中;源存储节点接收到第一份数据后给集群中分配的用于做数据冗余复制的第二个节点发送远程过程调用,冗余复制节点收到消息后,通过远程持久内存访问完成数据的远程复制,完成数据的高可用持久写入;本发明实现了在当前硬件下数据传输处理,存储的过程中的最短数据拷贝、存储路径,高效流式数据处理及存储,解决了当前存储和计算同步进行时数据多次拷贝的时延,效率和资源浪费问题。