一种卫星物联网Spark数据处理方法、系统、终端及存储介质

基本信息

申请号 CN202210238071.X 申请日 -
公开(公告)号 CN114625794A 公开(公告)日 2022-06-14
申请公布号 CN114625794A 申请公布日 2022-06-14
分类号 G06F16/25(2019.01)I;G06F16/27(2019.01)I;H04L67/12(2022.01)I 分类 计算;推算;计数;
发明人 吕强;贾霞;唐尧;宋博;谭宇;田方;刘亮;王新蕾;赵金波;信子昂;闫少文 申请(专利权)人 北京国电高科科技有限公司
代理机构 北京维正专利代理有限公司 代理人 -
地址 100089北京市海淀区北清路68号院2号楼1层59室
法律状态 -

摘要

摘要 本申请涉及一种卫星物联网Spark数据处理方法、系统、终端及存储介质,其属于数据处理领域,其中,一种卫星物联网Spark数据处理方法包括获取地面采集数据并将地面采集数据存入数据库中;调用Spark计算引擎对存入数据库中的地面采集数据进行并行处理;生成RDD模型,并利用RDD模型将主机资源分配至Spark计算引擎中。本申请具有提高了数据处理效率的效果。