一种基于大数据架构的车联网数据分析平台
基本信息
| 申请号 | CN202110146529.4 | 申请日 | - |
| 公开（公告）号 | CN112507003A | 公开（公告）日 | 2021-03-16 |
| 申请公布号 | CN112507003A | 申请公布日 | 2021-03-16 |
| 分类号 | G06F16/2458(2019.01)I;G06F16/215(2019.01)I;G06F16/182(2019.01)I;G06F16/248(2019.01)I;G06F16/2455(2019.01)I;G06F9/54(2006.01)I;G06F16/2457(2019.01)I | 分类 | 计算；推算；计数; |
| 发明人 | 王欣然;孙杰;沈祥红 | 申请（专利权）人 | 江苏海平面数据科技有限公司 |
| 代理机构 | 南京品智知识产权代理事务所（普通合伙） | 代理人 | 奚晓宁;张明昌 |
| 地址 | 210019江苏省南京市建邺区云龙山路80号 | ||
| 法律状态 | - | ||
摘要
| 摘要 | 本发明是一种基于大数据架构的车联网数据分析平台，包括数据接收模块、数据分析任务管理模块和数据推送模块；数据接收模块接收车载终端上报的采集数据，按照一定数据预处理逻辑进行判断和处理，将满足一定条件的数据写入消息中间件Kafka中；数据分析任务管理模块将数据分析任务提交到Spark分布式计算引擎中，在数据分析任务执行过程中统一进行监控和管理，将数据分析任务运行期间的监控指标和最终分析结果写入数据库Clickhouse中；数据推送模块基于Websocket协议接收用户订阅某个数据分析任务输出结果请求；解决了传统数据分析平台无法与线上大数据场景环境对接、模型训练分析过程不规范等问题。 |
