《7、路特斯(卢总) :RG工具链介绍.pdf》由会员分享,可在线阅读,更多相关《7、路特斯(卢总) :RG工具链介绍.pdf(26页珍藏版)》请在三个皮匠报告上搜索。
1、智能驾驶云端数据智能驾驶云端数据我们处理明天的问题,用的不是今天的工具,而是明天的工具。Kevin Kelly WHAT TECHNOLOGY WANTSROBO Galaxy 智能驾驶云端数据3朵云 7模块使用混合云理念,结合了公有云的弹性算力,私有云的海量存储以及保密机房的合规处理,完成数据从采集、合规、标注、训练、仿真的全流程服务,并提供各流程所需的数据管理及数据展示功能。公有云弹性计算私有云海量存储保密机房合规处理ROBO Galaxy智能驾驶云端数据工厂数据合规数据采集数据管理数据监控数据仿真数据训练数据标注1234567ROBO Galaxy 智能驾驶云端数据工厂ROBO Gala
2、xy 框架结构 数据驱动的智能驾驶闭环系统SaaS生态层PaaSIaaS公有云私有云MQ、MongoDB、Redis、GPU、NAS、ACK、MySQL、ceph、CPFS、Prometheus、XXL、Nacos数据管理DMS 场景提取/数据管理任务编排,任务调度 K8S数据挖掘采集管理数据解析数据合规任务管理多模块仿真评价体系并发调度仿真服务模型部署模型管理弹性计算闭环训练训练服务数据回放数据大屏实时监控数据监控2D 3D联合标注数据可视化灵活模板标注工具数据标注数据采集车队管理人员管理路线管理统一数据管理海量大数据存储高速分布式对象存储针对智驾的数据采集和标注平台模型训练与仿真效率提升支
3、持万级别并发调度模型训练,智驾仿真合规存储和访问管控CAAS严格遵循中国法律法规数据采集公有云弹性计算私有云海量存储保密机房合规处理ROBO Galaxy智能驾驶云端数据工厂数据合规数据采集数据管理数据监控数据仿真数据训练数据标注1234567高安全高性能/PB级数据存储/百万级请求并发/无限扩张/保密机房安全隔离/访问控制:防火墙+白名单高可靠/同城双中心灾备/负载均衡/故障自动切换智能驾驶数据来源于车身上各种传感器的数据,包括车载摄像头、激光雷达、毫米波雷达、超声波雷达等感知数据,同时车辆本身也会产生总线信号等数据,用于帮助智能驾驶中车辆的决策与控制,随着数据量的增多,对数据规模、数据精度
4、、数据维度、数据质量的要求也日益增长车辆日志感知数据接管数据特殊场景片段监控异常数据DATA磁盘/无线网络数据合规保密机房关键场景数据公有云数据储存、解析、回放、标注私有云ROBO Galaxy数据采集流程高安全高性能/PB级数据存储/百万级请求并发/无限扩张/保密机房安全隔离/访问控制:防火墙+白名单高可靠/同城双中心灾备/负载均衡/故障自动切换数据采集 高安全、高性能、高可靠的数据采集服务数据采集数据管理测试平台模型训练场景标签高快场景:巡航道路场景:路口驾驶行为:变道RG利用数采数据与仿真后的结果数据作为输入经过数据管理平台处理成帧数据后经大模型场景识别可生成场景标签,节省了人工标记的时
5、间并实现数据场景的分类数据采集 高安全、高性能、高效率的数据采集服务数据合规公有云弹性计算私有云海量存储保密机房合规处理ROBO Galaxy智能驾驶云端数据工厂数据合规数据采集数据管理数据监控数据仿真数据训练数据标注1234567/依照中国汽车工业协会发布的汽车传输视频及图像脱敏技汽车传输视频及图像脱敏技术要求与方法术要求与方法团体标准,进行合规处理/全程于私有化保密机房私有化保密机房处理及私有云存放,确保数据安全性合规安全基于神经网络模型,自主识别数据集(图、视频等)中的敏感信息,并根据敏感等级采取局部、全量脱敏方式数据合规 覆盖车端、路端、云端传输的数据合规体系1.将采集到的数据包回传到
6、自建保密机房进行批量脱敏2.依照中国汽车工业协会发布的汽车传输视频及图像脱敏技术要求与方法团体标准,进行合规处理3.抽取数据包非结构化图像档案,进行不可逆的脱敏匿名化处理,抹除可识别出个人身份信息部份4.全程于私有化保密机房处理及私有云存放,确保数据安全性私有云保密机房数据采集路采数据包数据脱敏数据存储场景挖掘数据解析格式转换数据采集合规架构静态与动态展示车辆脱敏效果数据合规 脱敏效果展示某友商效果数据标注公有云弹性计算私有云海量存储保密机房合规处理ROBO Galaxy智能驾驶云端数据工厂数据合规数据采集数据管理数据监控数据仿真数据训练数据标注1234567自动标注协助人工标注标注平台/支持
7、上百人同时标注作业/支持多机构隔离、丰富的权限管理自动预标注/支持图片、点云格式数据自动标注/各类别障碍物识别率mAP达到92.7%,持续优化中/节约人力成本及预算90+%高级别的智能驾驶系统主要由感知、定位、预测和控制五部分构成,感知部分则需要对传感器采集的点云图像数据进行处理,需要处理的感知场景包括2D图像数据和3D点云数据,种类繁多,ROBO Galaxy数据标注系统通过智能的自动标注协助人工标注,可有效提升数据标注工作效率摩托三轮罩前后轮线地平线可忽略杆交通灯指示牌骑的动物3D点云标注可助力智能驾驶模型的训练,路特斯机器人基于对于智能驾驶标注经验,可对3D障碍物进行框选、对雷达图进行语
8、义分割,帮助车辆更好的感知路面点云融合标注可助力智能驾驶模型的训练,可对多传感器融合的数据进行同时标注,应用于智能驾驶场景的训练落地图片分类可实现千万级图片分类,并对图片图片做属性归类,有助于图像识别的模型训练语义分割基于区域的形状标注,对复杂不规则图片进行区域划分及属性标注,主要应用于场景分割,智能驾驶道路分割等点云融合3D点云标注类型标注内容标注-标注团队审核-审核员质检-质检团队验收-验收团队自动标注自标注模型具备高兼容性,除平台所提供的自标模型外,可接入三方模型,也支持“双轨运行”:三方模型与平台模型互为补充数据标注平台数据标注 自动标注协助人工标注形成闭环式数据标注体系数据标注 RO
9、BO Galaxy 数据标注平台优势标注平台-支持上百人同时标注作业-支持多机构隔离、丰富的权限管理动预标注-利用大模型对图片、点云格式数据自动标注-各类别障碍物识别率mAP达到92.7%,持续优化中-节约人力成本及预算90+%数据训练公有云弹性计算私有云海量存储保密机房合规处理ROBO Galaxy智能驾驶云端数据工厂数据合规数据采集数据管理数据监控数据仿真数据训练数据标注1234567Argo榜单国际第一灵活稳定易用高效/灵活资源配置到各个任务/云服务24小时专人维护/训练任务自动分配集群、节点/高效文件系统提供高性能吞吐前模型对机器算及资源都提出更的要求,为应对新时代挑战RG采研模型训练
10、平台实现多机多卡调度,更效得利机器资源进模型训练与迭代。数据训练 灵活、稳定、易用及高效的机器学习训练环境,一站式模型训练服务与快速部署灵活:在线镜像、代码版本管理;灵活资源配置到各个任务稳定:云服务24小时专人维护易用:训练任务自动分配集群、节点;已集成WebIDE,便于开发调试高效调度:百余张高性能GPU提供强大算理;高效文件系统提供高性能吞吐、IOPS以及低延迟特性异构硬件模型训练模型开发模型管理模型部署镜像管理代码管理标注数据集数据训练 服务案例 迭代训练感知预测模型训练逻辑 算法网络结构通过使用该平台,智驾预测算法的平均偏差值取得了Argoverse 数据集三项指标两项第一名,一项第
11、二名的好成绩!预测轨迹与真实轨迹的偏差从1.96M 降到 1.55M用矢量表示各个道路组件的空间局部性;利用图神经网络对各个道路组件进行信息编码;对所有组件之间的高级交互情景进行建模;算法流程及效果数据仿真公有云弹性计算私有云海量存储保密机房合规处理ROBO Galaxy智能驾驶云端数据工厂数据合规数据采集数据监控数据管理数据仿真数据训练数据标注1234567虚实结合,高效并行WorldSim/支持100+VTD云端并发,日行3万公里以上/支持真正量产E2E算法的云端仿真实践LogSim/支持全部路测数据回归测试/支持多模块仿真虚实结合的云仿真平台助力智能驾驶落地,基于数据驱动和场景构建,虚实
12、结合、并行测试,致力于行业一流智能驾驶产品及服务的落地Worldsim 云仿真平台Logsim 云仿真平台WorldSim 是完全虚拟的世界来进行仿真,由人为预设的障碍物行为和交通灯状态构成的场景,可以简单高效的测试自动驾驶车辆。LogSim 是在现实场景中增加虚拟设置,由路测数据提取的场景,系统提供复杂多变的障碍物行为和交通状况,使场景充满不确定性。场景路型障碍物类型道路规划红绿灯信号十字路口、掉头、直行、三叉路口、弯道等行人、机动车、非机动车等直行、掉头、变道、左右转、并线等红灯、绿灯、黄灯数据仿真 虚实结合,并行测试 集成WorldSim及LogSim双平台数据仿真LogSim数据仿真平
13、台是在现实场景中增加虚拟设置,由路测数据提取的场景,提供复杂多变的障碍物行为和交通状况,使场景充满不确定性数据仿真 ROBO Galaxy LogSim数据仿真平台优势-支持全部路测数据回归测试-支持多模块仿真,如感知、定位、预测、规控、风险模型等-LogSim支持多种灵活配置、评价、场景集、CPU/GPU、算法产物、动力学等-已同时支持1000+并发任务,可弹性扩容到10000+-强大的仿真平台K8S监控能力,支持灵活调度稳定运行,CPU/内存/节点/磁盘/命名空间/POD监控-查看仿真与原始数据对比回放优势分析数据仿真 实转虚与海量数据泛化数据采集为实现海量仿真的愿景,发挥Worldsim
14、的优势,RG仿真平台利用原始道路测试的数据经过场景转换工具提取出地图与场景,并通过模型进行参数泛化生成海量LTC场景用于仿真测试场景转换生成虚拟场景及地图泛化工具数据仿真 ROBO Galaxy WorldSim仿真平台优势-支持千级VTD和独立仿真引擎云端并发-支持真正量产E2E算法的云端仿真实践-实现openDRIVE虚拟地图接入规控算法,与车端使用高精度地图解绑-支持虚拟场景的海量泛化和实转虚场景泛华等功能WorldSim数据仿真平台是完全虚拟的世界来进行仿真,由人为预设的道路和障碍物构成的场景,可以作为单元测试简单高效的测试自动驾驶车辆优势分析数据监控公有云弹性计算私有云海量存储保密机
15、房合规处理ROBO Galaxy智能驾驶云端数据工厂数据合规数据采集数据管理数据监控数据仿真数据训练数据标注1234567实时记录,高效管理/方便管理,实时监控/软硬件稳定性监控,车辆负载资源监控/CICD每日构建对数据进行实时追踪,对异常值做出及时反馈,可保证数据采集端与屏显端的高度联系,高效、及时的可视化保障数据最新状态的呈现。-方便管理,实时监控,显示车辆实时状态及资源占用状态,问题项可第一时间展示-软硬件稳定性监控,车辆负载资源监控-支撑日常测试以达到数据驱动目的,CICD每日构建优势分析数据监控 实时记录车辆状态与运行轨迹,提供车队运营监控车速 加速度 接管状态 剩余电量数据管理公有
16、云弹性计算私有云海量存储保密机房合规处理ROBO Galaxy智能驾驶云端数据工厂数据合规数据采集数据管理数据监控数据仿真数据训练数据标注1234567全量数据统一管理/可视化数据Lviz/支持路测和仿真数据显示及切换/支持下载地图和算法日志/支持多类型图表和数据流独立展示数据管理 ROBO Galaxy 仿真可视化Lviz工具-支持路测和仿真数据显示及切换-支持下载地图和算法日志-支持多类型图表和数据流独立展示-针对感知、定位、预测、规划、控制、风险模型等多模块优化展示-支持NOA/ADAS问题分析-Win/Linux/Mac/Pad/手机使用-可视化数据压缩95+%,耗时减少95%-可视化
17、数据压缩转换Lviz是一个用于3d激光雷达点云的可视化和插入数据的工具,提供纹理映射和用户控制显示设置等数据和背景颜色。可用来查看任何三维点云数据如地震或重力。优势分析谢谢THANK YOU私密。此文件中所包含的信息以及附件仅限于指定收件人接收。此文件是专有的以及私密的。如果阁下不在收件人范围,在此正式告知您:文件以错误的方式被送达至阁下。在这种情况下禁止以任何方式使用、传播 分发和复制此文件 电子文件本身易被修改。LOTUS 集团对于被篡改、歪曲、修改的文件信息将不承担任何责任。如果阁下错误收到本电子文件,烦请您立即用电子邮件回复告知 LOTUS 集团。我们感谢您的配合。CONFIDENTI
18、AL The information contained in this message and any attachments hereto are intended only for the personal use of the designated recipient(s).This message is privileged and confidential.If the reader of this message is not the intended recipient,you are hereby notified that you have received this do
19、cument in error,and that any review,dissemination,distribution,or copying of this message is prohibited.Creative and digital content are susceptible to alteration.LOTUS shall not be liable for the message if altered,changed or falsified.If you have received this document in error,please notify LOTUS immediately by email or telephone.Thank you for your cooperation.LOTUS 2022 FOR OUR INVESTORS&SHAREHOLDERS