一种基于大数据建模的BI应用系统
基本信息
申请号 | CN201911360296.7 | 申请日 | - |
公开(公告)号 | CN111126852A | 公开(公告)日 | 2020-05-08 |
申请公布号 | CN111126852A | 申请公布日 | 2020-05-08 |
分类号 | G06Q10/06;G06F8/20;G06F16/21;G06F16/215;G06F16/2458 | 分类 | 计算;推算;计数; |
发明人 | 陆洋 | 申请(专利权)人 | 江苏三六五网络股份有限公司 |
代理机构 | 南京常青藤知识产权代理有限公司 | 代理人 | 仲晖 |
地址 | 210000 江苏省南京市新城科技园云龙山路99号省建大厦B座16楼 | ||
法律状态 | - |
摘要
摘要 | 本发明提供一种基于大数据建模的BI应用系统,包括:数据采集存储模块,DPI、业务侧、网元侧数据通过文件接口方式发送到Flume‑NG集群,将接收到的数据实时的通过hdfs方式汇聚到大数据分析平台;数据清洗模块,通过编写HQL脚本对数据进行清洗、转换,形成特征宽表;数据挖掘模块,基于特征宽表的数据建模进行模型开发、模型评估和模型应用;分析结果发布,模型应用的结果集存储在HBase中,数据的调用通过HBase API实现,数据的展现通过ECharts技术实现。本发明统一进行数据建模,建设集中的数据处理中心,提供强大的数据处理能力,保障系统的稳定运行,构建统一的BI应用中心,满足业务需求,体现数据价值。 |
