一种基于时序数据冷热分类的分层存储方法

基本信息

申请号 CN201810020924.6 申请日 -
公开(公告)号 CN108268217B 公开(公告)日 2021-04-30
申请公布号 CN108268217B 申请公布日 2021-04-30
分类号 G06F3/06 分类 计算;推算;计数;
发明人 徐汕;单酉;刘强;黄文峰;童奥;姜桥 申请(专利权)人 北京航天云路有限公司
代理机构 北京纽乐康知识产权代理事务所(普通合伙) 代理人 史静
地址 100080 北京市海淀区北四环西路66号3层3F-08室
法律状态 -

摘要

摘要 本发明公开了一种基于时序数据冷热分类的分层存储方法,包括以下步骤:建立UID系统,利用UID来对时序数据进行统一标识;通过特定的时间规则将数据分为实时数据、周天数据、历史数据以及冷数据,建立实时数据层、周天数据层、历史数据层以及冷数据层,依次分别存储在内存、SSD存储硬盘、HDD存储硬盘、分布式存储系统HDFS中;建立统一的数据插入、查询接口,通过查询的时间范围将查询请求路由到各自存储查询接口,为不同数据提供不同存储的访问。有益效果:通过将不同访问频次的数据进行分级存储,最大化利用存储空间、保证查询性能的同时,也降低了成本。