基于数据库的大数据增量计算处理方法
基本信息
申请号 | CN202110641698.5 | 申请日 | - |
公开(公告)号 | CN113468192A | 公开(公告)日 | 2021-10-01 |
申请公布号 | CN113468192A | 申请公布日 | 2021-10-01 |
分类号 | G06F16/23(2019.01)I | 分类 | 计算;推算;计数; |
发明人 | 杜志强;呙维 | 申请(专利权)人 | 南京北斗创新应用科技研究院有限公司 |
代理机构 | 南京创略知识产权代理事务所(普通合伙) | 代理人 | 闫方圆 |
地址 | 210000江苏省南京市六合区龙池街道虎跃东路8号 | ||
法律状态 | - |
摘要
摘要 | 本发明公开了一种基于数据库的大数据增量计算处理方法,对增量数据的增量计算过程,通过只计算新增的数据DΔ得到增量计算结果RΔ,然后将输入数据源计算结果R1和增量计算结果RΔ进行合并后进行相关计算得到最终更新数据源计算结果R2,避免了冗余计算、节省了计算资源、提高了大数据分析效率,增量数据的特点在于时序性较强,数据产生之后不会变动,如机动车轨迹数据、人员活动轨迹等,通过GPS记录轨迹后,数据不会再发生变动,对于增量数据的唯一要求在于其包含增量识别字段,适用于变动,如机动车轨迹数据、人员活动轨迹等领域,具有良好的应用前景。 |
