基于大数据的数据分析方法、装置、设备及可读存储介质
基本信息
| 申请号 | CN201911366572.0 | 申请日 | - |
| 公开（公告）号 | CN111177220B | 公开（公告）日 | 2022-07-15 |
| 申请公布号 | CN111177220B | 申请公布日 | 2022-07-15 |
| 分类号 | G06F16/2458（2019.01）I;G06F16/28（2019.01）I;G06F16/22（2019.01）I;G06K9/62（2022.01）I;G06Q40/08（2012.01）I | 分类 | 计算；推算；计数; |
| 发明人 | 方木鑫 | 申请（专利权）人 | 中国平安财产保险股份有限公司 |
| 代理机构 | 北京市京大律师事务所 | 代理人 | - |
| 地址 | 518048广东省深圳市福田区益田路5033号平安金融中心12、13、38、39、40层 | ||
| 法律状态 | - | ||
摘要
| 摘要 | 本发明涉及人工智能技术领域，公开了一种基于大数据的数据分析方法，包括以下步骤：对数据结果表中的初始数据进行抽取并进行合并，得到合并表，以及通过数据抽取工具Sqoop将合并表导入大数据平台；通过大数据平台对预处理数据结果表中的预处理数据进行数据清洗，得到分摊结果数据表；对分摊结果数据表进行拆分，得到拆分数据结果表集合并导入分布式内存实时分析系统Druid，得到分析结果集，若偏差值大于或等于预设阈值，则通过决策树对初始数据进行挖掘，得到挖掘结果。本发明还公开了一种基于大数据的数据分析装置、设备及计算机可读存储介质。本发明提供的基于大数据的数据分析方法提高了数据分析的效率。 |
