基于数据库的大数据增量计算处理方法

基本信息

申请号 CN202110641698.5 申请日 -
公开(公告)号 CN113468192A 公开(公告)日 2021-10-01
申请公布号 CN113468192A 申请公布日 2021-10-01
分类号 G06F16/23(2019.01)I 分类 计算;推算;计数;
发明人 杜志强;呙维 申请(专利权)人 南京北斗创新应用科技研究院有限公司
代理机构 南京创略知识产权代理事务所(普通合伙) 代理人 闫方圆
地址 210000江苏省南京市六合区龙池街道虎跃东路8号
法律状态 -

摘要

摘要 本发明公开了一种基于数据库的大数据增量计算处理方法,对增量数据的增量计算过程,通过只计算新增的数据DΔ得到增量计算结果RΔ,然后将输入数据源计算结果R1和增量计算结果RΔ进行合并后进行相关计算得到最终更新数据源计算结果R2,避免了冗余计算、节省了计算资源、提高了大数据分析效率,增量数据的特点在于时序性较强,数据产生之后不会变动,如机动车轨迹数据、人员活动轨迹等,通过GPS记录轨迹后,数据不会再发生变动,对于增量数据的唯一要求在于其包含增量识别字段,适用于变动,如机动车轨迹数据、人员活动轨迹等领域,具有良好的应用前景。