《车联网全景监控数据时空超融合数据库方案-企业级云原生数据库最佳实践分论坛（20页）.pdf》由会员分享，可在线阅读，更多相关《车联网全景监控数据时空超融合数据库方案-企业级云原生数据库最佳实践分论坛（20页）.pdf（20页珍藏版）》请在三个皮匠报告上搜索。

1、车联网全景监控数据时空超融合数据库方案王成名上海市新能源汽车公共数据采集与监测研究中心技术总监Contents目录01数据中心平台业务简介02平台技术架构03平台愿景与目标数据中心平台业务简介01数据中心平台简介市级新能源汽车公共服务平台上海市经济和信息化委员会指导下成立第三方新能源汽车公共数据服务平台，成立于2014年，实现在沪销售新能源汽车数据全接入。根据GB/T 32960.1-2016电动汽车远程服务与管理系统技术规范采集124项数据字段。全国最大新能源汽车监管平台上海市唯一，全国接入量最大的地方新能源政府监管平台，目前已接入超过100家车企100个品牌，接近1000个车型，超过58万

2、量新能源汽车数据。占全国新能源汽车推广量的10%左右。包含乘用车、商用车、物流、大巴等。新能源汽车数据采集项数据项：38项静态数据(车企+车型+VIN)+80项动态数据=118 车辆状态 充电状态 运行模式 车速 累计里程 总电压 总电流 SOC DC-DC状态 档位 绝缘电阻 制动踏板状态 加速踏板行程值整车数据 车辆状态 充电状态 运行模式 车速 累计里程 总电压 总电流发动电机数据 单体电池总数 储能装备电流 单体电池电压 可充电储能（电池单体）最高报警等级 通用报警标识 动力电池故障总数N1 动力电池故障代码列表 驱动电机故障总数N2 驱动电机故障代码列表 发动机故障总数N3 发动机故

3、障列表 其它故障总数N4 其它故障代码列表报警数据 定位状态 经度 纬度位置数据 最高电压电池子系统号 最高电压电池单体代号 电池单体电压最高值 最低电压电池子系统号 最低电压电池单体代号 电池单体电压最低值 动力电池中最高温度总成号 最高温度探针在总成中代号 动力电池中最高温度值 动力电池中最低温度总成号 最低温度探针在总成中代号 动力电池中最低温度值动力电池极值数据 驱动电机序号 驱动电机状态 驱动电机控制器温度 驱动电机转速 驱动电机转矩 驱动电机温度 电机控制器输入电压 电机控制器直流母线电流驱动电机数据 燃料电池电压 燃料电池电流 燃料消耗率 燃料电池温度探针总数 探针温度值 氢系统

4、中最高温度 氢系统中最高温度探针代号 氢气最高浓度 氢气最高浓度传感器代号 氢气最高压力 氢气最高压力传感器代号 高压DC-DC状态燃料电池极值数据数据中心平台简介1+X多源异构数据中心电池溯源数据电池溯源管理平台电动汽车数据新能源汽车数据平台政府委托燃料汽车及加氢站数据氢能源车站一体化平台政府委托政府委托可再生能源数据GEF可再生能源管理平台国际合作项目智能网联汽车数据智能网联汽车管理平台政府委托平台业务介绍数据接入：在沪销售全接入、数据质量政策制定、执行、后评估：充电设施规划、核查、法人购车资格、二手车交易资格核查、节能减排成效评估等标准建设：地标国标参编安全监管：高危车辆识别、安全报警响

5、应、事故核查等政府服务市场服务数据评价：数据质量（治理）市场营销：消费者画像（行驶、充电行为分析-4S店选址规划）、定制化报告后市场：二手车交易、电池梯次利用、保险、有序充电等数据开放：面向高校和科研机构的数据开放服务（人才培养、算法创新、实训基地）平台系统架构02平台系统架构：数据流TCP/IPGetWay网关校验/转发采集热存储压缩存储数据分析/挖掘MLib对外服务APIBI工具应用程序平台系统架构数据中心数据平台数据源数据采集存储分析温存储（HDFS）高速缓存（Redis）热存储（Hbase）静态数据（RDS）多协议数据采集平台网联网网关（LMQ）文件日志（flume）消息队列（Kafk

6、a）结构化数据数据接口API加氢站数据电池溯源数据新能源汽车数据智能网联汽车数据半结构化数据物联网时序数据文件数据流媒体数据数据多级缓存架构面向应用及开放-统一数据服务中间件（one service）以业务对象+萃取标签为架构构建（OneId体系）数据应用大屏展示可视化报表平台数据管理平台数据监控平台数据可视化及应用多源异构数据平台冷存储（OSS）平台系统架构：数据结构化物联网时序数据结构化处理xxxxx10:0180%VIN时间socxxxxx10:01800VIN时间总里程xxxxx10:01socVIN时间车辆状态xxxxx10:0178VIN时间实时车速xxxxx10:0279%xxx

7、xx10:02801xxxxx10:02socxxxxx10:0280 xxxxx10:0378%xxxxx10:03802xxxxx10:03socxxxxx10:0370 xxxxxxxxxxxxxxxVIN车辆动力类型车辆状态开始时间结束时间时长（分）Soc开始Soc结束起始经纬度 结束经纬度行驶里程平均车速BEVPHEVFCV充电行驶怠速18:007:0012:0023:009:0013:003001206010%95%89%95%20%70%0.97.27.32119.97.31.32119.97.27.32119.97.27.32119.97.31.32119

8、.97.27.32平台系统架构：问题与挑战技术栈复杂多组件融合搭配技术栈高度复杂维护成本高存储碎片化数据同步机制实现和维护数据查询维护数据生命周期管理数据高度冗余开发门槛高不同技术栈所用不同开发语言及工具开发门槛高难以标准化平台扩展性挑战容量规划资源利用率扩缩搬迁平台系统架构：阿里云Lindorm电动汽车智能网联汽车加氢站数据电池溯源数据数据分析spark网关服务器多模数据存储BI报表l 低成本 高可用 弹性灵活 自动数据冷热分离 低延迟数据应用及报表数据分析数据上传端到端的产品一体化，大幅减少开发与维护成本，提升易用和稳定性u支持HBase的增量数据实时自动归档为Parquet格式，并定期合

9、并、清洗，供Spark分析uSpark分析结果BulkLoad到HBaseu能力产品化封装，支持通过UI和API调用，并具备自动容错、分布式扩展、监控报警、高性能等能力Executor0DriverExecutorXSpark引擎定时调度start/stopconfighlogHBase增量归档.归档分析regionhfileExecutor1BulkLoad数据回流控制流数据流BDS数据同步服务全量归档数仓/data/202101/data/202102/data/202103/data/202112/tmp/20211018/tmp/20211019/tmp/20211020/tmp/20

10、211021/列存数据工作台平台系统架构：阿里云Lindorm平台愿景与目标03安全监管事故分析：基于行驶数据和驾驶行为进行数据分析在安全监管方面提供数据支撑。数据开放电池健康度预测应用案例愿景及目标构建智能化新能源汽车及智能网联汽车数据生态政府监管/城市规划/交通管理部门保险/再保险行业电池再利用/电池残值评价车辆后市场用户汽车制造用户高校及科研机构新能源汽车数据/充电数据路网/POI/网点数据EV消费者画像供应商电池健康度算法供应商交通出行场景算法供应商其它算法供应商有质量保障的数据经验证算法包具有特征标签的数据电动汽车大数据分析应用开放生态平台安全电池健康安全监管氢车氢站安全监管政策交通规划能源环境网联信息安全监管氢燃料示范政策补贴监管2025炭达峰数据评估电动汽车数据赋能智慧交通电动汽车交通流数据共享数据赋能充电基础设施规划数据赋能城市电力需求规划电动汽车移动储能与V2G汽车数据赋能电网公治有序充电数据驱动炭排放评价交易数据赋能电池溯源体系建设1+X数字底座新能源汽车数据平台氢燃料车站一体化管理平台电池可追溯平台新能源汽车换电站管理平台智能网联汽车管理平台网联汽车信息安全管理平台X数字底座共治共建共享愿景及目标THANKS