基于KylinOLAP的多维数据分析方法及系统
基本信息
申请号 | CN202110657031.4 | 申请日 | - |
公开(公告)号 | CN113360472A | 公开(公告)日 | 2021-09-07 |
申请公布号 | CN113360472A | 申请公布日 | 2021-09-07 |
分类号 | G06F16/182(2019.01)I;G06F16/2455(2019.01)I;G06F16/2458(2019.01)I;G06F16/248(2019.01)I;G06F16/28(2019.01)I | 分类 | 计算;推算;计数; |
发明人 | 张文霖;方春蓉;何怡静;曾东将;张宝光;杨克伟 | 申请(专利权)人 | 杭州东方通信软件技术有限公司 |
代理机构 | 北京亿腾知识产权代理事务所(普通合伙) | 代理人 | 陈霁 |
地址 | 310013浙江省杭州市西湖区文三路398号 | ||
法律状态 | - |
摘要
摘要 | 本发明提供一种基于Kyl in OLAP的多维数据分析处理方法及系统,包括:定期从数据库中采集数据集写入HDFS文件系统中;获取hadoop集群的数据仓库中的数据表的结构信息,并根据该结构信息配置生成多个多维立方体;通过Kyl in多维引擎同步HDFS文件系统中的数据集,并根据该数据集和多维立方体构建生成多个立方体段存储在Hbase数据库中;响应于用户输入的查询语句,通过Kyl in多维引擎在Hbase数据库中查找对应的立方体段,并返回该立方体段中的数据结果。基于Kyl in OLAP引擎和Saiku工具实现了高定制多维数据分析报表,配置数据维度后无需人工整合,根据业务需求,自由灵活组合各维度,系统自动按并列、级别等多种组合方式执行数据调度、汇聚、计算和呈现,并支持报表、图表等多形式呈现。 |
