一种毫秒级时序流数据精准切片方法
基本信息
申请号 | CN202110703269.6 | 申请日 | - |
公开(公告)号 | CN113434547A | 公开(公告)日 | 2021-09-24 |
申请公布号 | CN113434547A | 申请公布日 | 2021-09-24 |
分类号 | G06F16/2455;G06F16/27 | 分类 | 计算;推算;计数; |
发明人 | 王新根;王新宇;黄滔;鲁萍;陈伟;史昊宸 | 申请(专利权)人 | 浙江邦盛科技股份有限公司 |
代理机构 | 杭州求是专利事务所有限公司 | 代理人 | 刘静 |
地址 | 310012 浙江省杭州市西湖区西斗门路3号天堂软件园D幢17层ABCD座 | ||
法律状态 | - |
摘要
摘要 | 本发明公开了一种毫秒级时序流数据精准切片方法。该方法分为四个部分:精准切片的创建、精准切片的聚合、聚合数据的持久化存储和毫秒级切片的查询。首先对时序流数据的处理,包括毫秒级精准切片的创建以及毫秒级精准切片内聚合计算和存储,其次是对时序流数据的查询。本发明提出的毫秒级时序流数据精准切片方法能够在毫秒级时间范围内精准地实时处理用户流式数据,利用不同时序下的切片聚合技术提升系统吞吐量和应对海量数据的高可用性,并根据时间局部性原则将切片聚合数据存入分布式数据库从而高效利用内存空间,最后优化设计了针对时序流数据的查询接口。 |
