一种基于时序数据冷热分类的分层存储方法
基本信息
申请号 | CN201810020924.6 | 申请日 | - |
公开(公告)号 | CN108268217B | 公开(公告)日 | 2021-04-30 |
申请公布号 | CN108268217B | 申请公布日 | 2021-04-30 |
分类号 | G06F3/06 | 分类 | 计算;推算;计数; |
发明人 | 徐汕;单酉;刘强;黄文峰;童奥;姜桥 | 申请(专利权)人 | 北京航天云路有限公司 |
代理机构 | 北京纽乐康知识产权代理事务所(普通合伙) | 代理人 | 史静 |
地址 | 100080 北京市海淀区北四环西路66号3层3F-08室 | ||
法律状态 | - |
摘要
摘要 | 本发明公开了一种基于时序数据冷热分类的分层存储方法,包括以下步骤:建立UID系统,利用UID来对时序数据进行统一标识;通过特定的时间规则将数据分为实时数据、周天数据、历史数据以及冷数据,建立实时数据层、周天数据层、历史数据层以及冷数据层,依次分别存储在内存、SSD存储硬盘、HDD存储硬盘、分布式存储系统HDFS中;建立统一的数据插入、查询接口,通过查询的时间范围将查询请求路由到各自存储查询接口,为不同数据提供不同存储的访问。有益效果:通过将不同访问频次的数据进行分级存储,最大化利用存储空间、保证查询性能的同时,也降低了成本。 |
