一种用于将数据加载到数据库中的方法及系统

基本信息

申请号 CN201810831294.0 申请日 -
公开(公告)号 CN109165208B 公开(公告)日 2020-12-15
申请公布号 CN109165208B 申请公布日 2020-12-15
分类号 G06F16/21;G06F16/27 分类 计算;推算;计数;
发明人 刘聪玲;赵文银;约翰·格力高 申请(专利权)人 佛山市电子政务科技有限公司
代理机构 广州海藻专利代理事务所(普通合伙) 代理人 张大保
地址 528000 广东省佛山市禅城区季华五路22号季华大厦13层(住所申报)
法律状态 -

摘要

摘要 本发明公开了一种用于将数据加载到数据库中的方法及系统,该方法包括:接收将数据导入计算环境的请求,该计算环境至少具有分布式数据存储系统以提供非关系数据存储,该数据通过应用程序编程接口(API)从外部源导入;分析请求的一个或多个特征,以确定请求是否对应于导入大数据负载的请求;如果请求是针对大数据负载,则导致数据暂存;创建一个或多个数据管理作业以使分阶段数据存储在分布式数据存储系统的一个或多个节点中;将一个或多个数据管理作业发送到分布式数据存储系统中的一个或多个相应节点;使一个或多个作业异步执行以使分阶段数据存储在一个或多个节点中。