ARTICLE DETAIL

资讯详情

深耕网站视觉设计与运营推广的一线实战洞察。

采埃孚与英伟达联合开发车载AI系统:技术架构与量产挑战解析

采埃孚与英伟达联合开发车载AI系统:技术架构与量产挑战解析 简介这是一份关于采埃孚ZF与英伟达NVIDIA联合开发人工智能系统的技术资料PDF格式适用于自动驾驶、智能系统及汽车电子领域的研究人员、工程师和学习者可作为系统开发与行业合作的参考文献。资源共1个PDF文件大小仅607KB内容精炼围绕ProAI与DRIVE PX 2平台展开涵盖传感器融合、深度学习感知、路径规划等关键环节并附带舍弗勒CVT链条与博泽供应商案例便于从产业链视角理解智能驾驶技术落地。目前已有187人学习适合快速了解跨国企业在自动驾驶AI系统上的合作模式与技术架构。 从汽车行业的角度看采埃孚ZF和英伟达NVIDIA联合开发人工智能系统绝对算得上一个信号级事件。ZF不是做变速箱和一些底盘零部件的吗怎么就和英伟达走到一起了其实这几年ZF一直在往软件定义汽车的方向转而英伟达在车载AI算力平台和工具链上的地位大家也都有目共睹。这两个角色合作背后牵扯的技术栈、工程流程和生产关系远比表面新闻复杂得多。这篇文章我不打算只复述一遍新闻。我准备把这次合作拆开来看为什么是这两家、联合开发的AI系统到底要解决什么问题、车载AI系统的技术架构和量产落地会碰到哪些坑以及这件事对整个自动驾驶产业链的从业者到底意味着什么。如果你在看汽车智能化相关的技术方向或者就在做自动驾驶、域控制器、AI部署相关的工作这篇文章值得花几分钟读完。1. 这次联合开发到底在做什么背景与驱动力1.1 采埃孚的转型焦虑与英伟达的生态野心先说采埃孚。ZF在传统汽车供应链里的地位不用多讲AT变速箱、底盘系统、转向系统这些产品线几乎覆盖了全球主流车企。但这个行业正在发生一个根本性变化汽车的竞争力从机械素质转向计算能力。发动机和变速箱是上一个时代的核心现在电动化和智能化把重心拉到了电池、电控和算法上。ZF如果不转型它手里那些机械件积累就会逐渐贬值。所以这几年ZF在电子电气架构、域控制器、ADAS高级驾驶辅助系统上投入相当大ProAI车载超级计算机就是他们的核心布局之一。英伟达这边的逻辑也很清楚。它在AI训练市场的统治力来自CUDA生态但训练市场再大也大不过车载部署市场。英伟达想做的事情就是让车企在云端用CUDA训练模型在车上用英伟达的芯片推理模型整个链路都跑在自己的生态里。为了这个目标英伟达从Drive PX系列一路迭代到Orin、Thor还在不断强化自动驾驶相关的软件栈比如DriveOS、TensorRT、Isaac Sim这些工具链。但英伟达不擅长汽车工程车规认证、功能安全、传感器标定、整车集成、大规模量产的品控这些都是传统Tier 1的看家本领。所以这次合作的本质就一句话ZF需要英伟达的AI算力和软件生态英伟达需要ZF的量产工程能力和整车客户关系。这比单纯的买卖芯片要深得多属于把两家的底牌拼在一起做一套完整的系统方案。1.2 联合开发解决的是哪类问题联合开发AI系统通常不只是把几个模型跑在芯片上这么简单。在智能驾驶这个场景里它要解决的是一整条链路的问题感知层摄像头、毫米波雷达、激光雷达的数据如何实时处理目标检测、车道线识别、可行驶区域分割这些任务如何做到高准确率。决策规划层感知到环境之后车辆如何做行为决策跟车、变道、超车、避障这些策略从规则驱动转向AI模型驱动。域控制器集成所有算法都必须跑在车规级的计算平台上在功耗、散热、时延受限的条件下做到稳定运行。数据闭环路测数据回传、标注、训练、仿真、OTA更新这套循环要能持续运转让模型越跑越聪明。ZF和英伟达的合作本质上是想把这条链路完整地打通而不是提供一个demo级别的技术展示。ZF在商用车和乘用车领域有大量的量产经验英伟达提供算力底座和AI基础设施联合开发的目标就是把系统做到能过车规、能上量产的成熟度。2. 车载AI系统的技术架构把云端模型塞进车里2.1 感知层BEV视角与占用网络的工程实现现在车载AI感知的主流趋势是走向BEVBirds Eye View鸟瞰视角感知架构。所谓BEV就是让车辆把多个摄像头和雷达的数据融合到一个统一的俯视视角下在这个视角里做目标检测、车道线拟合和可行驶区域规划。好处很明显多传感器数据在统一坐标系下对齐后续决策规划模块拿到的就是一张清晰的上帝视角地图。具体到工程实现BEV感知一般分为三个环节图像特征提取、视角变换、特征融合与解码。图像特征提取通常用CNN或者Transformer结构把每个摄像头画面上物体的纹理、边界、深度线索抽出来。视角变换阶段主流方案是学习式的比如LSSLift, Splat, Shoot方法把2D图像特征抬升到3D空间再铺平到地面视角或者用Transformer的注意力机制直接隐式学习3D映射。特征融合之后通过解码器输出目标框、语义分割或者占用网格。ZF这种Tier 1做感知方案时不太会只依赖一种传感器。摄像头在逆光、黑夜、雨雾下的失效模式很明显所以毫米波雷达通常作为远距离测距的主力激光雷达则在近场和中距离提供高精度点云。多传感器的深度融合虽然计算开销大但会给整个系统的安全边界多一道保障。2.2 决策规划从规则驱动到端到端模型传统的决策规划模块是规则驱动为主有限状态机里定义跟车、停车、变道这些状态再配合代价函数搜索最优路径。这套方法好在行为可解释、安全可控但边界条件是硬编码的一旦遇到复杂城市路况规则组合会爆炸式增长维护成本极高。现在行业里更关注的是端到端模型输入传感器数据直接输出控制指令或者轨迹规划结果。这种方案的优势在于模型可以从大量人类驾驶数据里学习复杂交互行为不再依赖人工手写规则。采埃孚和英伟达这类合作技术路线上必然要兼顾两代方案短中期用规则加AI辅助的混合架构来保证安全L3以上级别再逐步提升端到端模型的比例。不过端到端并不是银弹。模型的可解释性弱、失效边界模糊这在车规安全上是很要命的事情。所以工程落地上常见的做法是端到端规划安全护栏AI模型给出一个拟人化的轨迹方案再由规则层做碰撞检测、风险判断如果超出安全边界就走降级策略。说白了AI负责像人一样开车规则负责像严厉教练一样纠偏。2.3 训练到部署数据闭环、仿真与TensorRT推理优化车载AI系统每跑一次产生海量真实场景数据。这些数据如果只存在车端不回流那模型的进化就无从谈起。所以数据闭环是核心工程链路车端采集关键场景片段上传到云端做脱敏处理标注团队对数据进行筛选标注训练平台用这些数据迭代模型仿真平台用合成数据补足长尾场景最后在云上完成大规模式回归测试并推送OTA更新。部署环节是绝大多数算法工程师最容易低估的部分。训练时用FP32高精度一张A100卡跑一个Batch毫无压力但在车载嵌入式平台上算力和带宽都受限通常要把模型量化到INT8精度再通过TensorRT等推理引擎做算子融合、内存复用和自动调优。我见过不少人用PyTorch训练出来的模型在Dev Box上跑得好好的一搬到实车平台上延迟直接翻三到五倍掉点掉到不能看。就是因为没有提前考虑算子的量化敏感性、显存访问模式和硬件加速器的特性。3. 硬件平台与工程选型为什么是英伟达Thor又不止是Thor3.1 域控制器与芯片方案ProAI与Drive Thor的搭配逻辑ZF的ProAI车载计算机已经迭代了很多代本质上就是一个高算力的域控制器平台负责把所有感知、规划、决策的算法集中运行。在和英伟达的合作方案里域控的核心算力底座采用了英伟达Drive系列芯片。当前英伟达在车端的主力是Orin单颗算力在254 TOPS左右而新一代的Drive Thor则会把算力拉到2000 TOPS的量级并且支持更复杂的Transformer模型和端到端网络跑在车上。注意这里有一个关键认知算力大不等于系统就能做好。车载芯片必须在功耗墙和散热条件内持续高负载运行不能像数据中心里的GPU那样自由奔放。另外车规级芯片要过AEC-Q100、ISO 26262功能安全等级认证不是消费级芯片随便改一改就能上车的。Thor方案一个很有意思的特点是它把智能驾驶、智能座舱、车联网等多个功能域在单颗芯片上做了融合这种高集成度对域控制器的设计复杂度和散热能力要求都更高恰好是ZF这类老牌Tier 1擅长攻关的地方。3.2 开发工具链CUDA之外的车规级定制英伟达在云端训练侧的护城河是CUDA生态但在车端部署侧更关键的软件栈是DriveOS和TensorRT。这个组合做的事情是在车机系统里管理计算资源、调度模型推理任务、优化每个算子在硬件上的执行效率。对ZF来说直接拿着CUDA开发肯定不行车规级系统还需要额外的定制层比如为特定车型标定传感器参数、适配不同厂商的摄像头和雷达驱动、定制安全等级不同的算法模块。所以整个工程结构大体是英伟达提供芯片、驱动、基础AI库和系统级中间件ZF负责上层应用算法、传感器融合、整车适配和功能安全认证。两家在这个合作里是各守一段。3.3 为什么是域控制器集中式架构而不是分布式ECU传统汽车的做法是每加一个功能就加一个ECU电子控制单元最后一辆车上有几十上百个ECU各自为战。这种方式在智能驾驶时代走到头了因为ADAS功能要求的是低时延、高带宽的数据共享各种传感器数据如果还要通过CAN总线在各个ECU之间来回广播延迟和成本完全不可接受。域控制器架构的核心思路是把原本散落在各个ECU里的功能集中到几个高算力的大盒子里面传感器数据直接汇聚到中心所有算法在中心完成计算再输出控制指令。这个架构对带宽、算力、软件复杂度都提出了更高的要求但它换来的是更敏捷的迭代能力和更低的系统成本。ZF和英伟达联合开发的AI系统瞄准的应该就是这个集中式的方向覆盖L2级别的辅助驾驶到L3级别的有条件下自动驾驶。4. 量产落地的现实挑战能跑通demo和能跑完十年大不相同4.1 AI模型的安全确定性算法偏见与可解释性危机车载AI和普通AI应用最大的区别在于它的每一次错误都可能带来人身伤害。这就对系统的确定性提出了极高的要求。但AI模型本身是概率系统它天然存在偏差和幻觉。比如目标检测模型对深肤色行人的检出率低于浅肤色或者对某些地区特有的三轮车、拖拉机识别不准这就是数据偏见带来的风险。训练数据如果没有覆盖足够广泛的场景分布模型在实车上的表现就会有系统性的盲区。行业里对这件事的态度很明确不指望AI模型完美但必须有安全兜底机制。所以量产方案通常是双轨制AI模型负责正常驾驶环境的决策独立的安全监控模块负责对AI的输出做合理性检查一旦发现异常立刻切换到保守策略比如减速、靠边停车、提醒驾驶员接管。这个安全监控模块往往不是AI模型而是用传统规则实现的因为规则可以给出形式化的正确性证明AI做不到。4.2 预期的功能安全标准ISO 26262与ISO 21448的区别与配合做车控系统的人都清楚ISO 26262是功能安全标准管的是电子电气系统本身不要因为故障导致危险。但AI系统的问题更麻烦在系统本身没坏的情况下因为感知环境理解错误照样可能引发事故。这就是SOTIF预期功能安全性ISO 21448要管的范畴专门针对功能不足、外部环境影响、误用这一类不是因为硬件故障导致的风险。联合开发AI系统要量产必须同时满足这两个标准。ISO 26262要求冗余设计比如双芯片互相备份或者主控加安全岛MCU的组合。ISO 21448要求的是持续的场景分析和系统验证定义车辆运行设计域ODD明确什么条件下系统可以开什么条件下必须退出。像采埃孚这种Tier 1这套安全流程本身就是核心竞争力之一也是英伟达这种芯片公司不太愿意深入涉足的领域。4.3 数据合规车端数据上云的红线与脱敏流程数据是AI系统的燃料但车载数据又是敏感度最高的一类数据。道路环境、行人面部、车牌、地理位置信息这些都涉及个人信息保护和测绘地理信息合规。特别是涉及跨境数据流动的时候整车厂和Tier 1都要做严格的合规评审。工程上的常见做法分几步走首先在车端做数据脱敏人脸、车牌在本地用算法打码再上传敏感区域的地理坐标加密做描点扰动云端平台设置多层访问权限不同角色只能看与职责相关的数据。更关键的还在于数据回传的触发策略——不能什么都传通常通过场景触发机制比如急刹车、安全气囊弹出、驾驶员接管、感知置信度低等事件触发片段回传平时大部分数据直接原地删除。想做量产级数据闭环的团队这套触发策略的设计比模型本身更难也更考验对场景的理解。4.4 长尾场景仿真与合成数据能解决多少问题自动驾驶行业有个认知共识真实路测里程的增长率永远赶不上场景复杂度的爆炸式增长。所以要覆盖长尾场景必须依赖仿真。英伟达的Omniverse和Isaac Sim在业内被大量用来建仿真环境生成雨天、夜晚、逆光、拥堵等极端场景的照片级数据。但仿真数据有个老问题领域差异。仿真场景再怎么逼真和真实传感器数据之间还是有差距模型在仿真数据上训练多了可能在真实场景掉精度。解决思路是仿真和真实数据混合训练或者用域适应技术把仿真数据的分布拉近到真实数据。这些工程手段在大规模量产项目里每天都在迭代也是联合开发的核心内容之一。5. 这件事对行业和从业者的影响5.1 Tier 1的重心迁移从机械件供应商到软件硬件AI系统服务商采埃孚和英伟达的合作案例对传统Tier 1的转型路线有很强的参考意义。过去Tier 1的核心能力在于精密制造和工程集成软件和算法通常是外包或者买来再集成的。但现在不行了车企对Tier 1的要求变成了你不但要能干活还要能出算法、出数据闭环方案、出AI系统架构。这种转型对组织能力的挑战是巨大的。一个做变速箱起家的公司要建立AI训练平台、算法团队、数据标注中心、仿真验证体系每一步都是对原有体系的拆解重建。ZF敢直接和英伟达绑定合作其实是聪明的一步——用生态的力量补足自己不擅长的部分把资源集中在整车工程、系统集成、安全认证这些自己最擅长也最卷不动的领域。5.2 对AI工程师和自动驾驶从业者的启示从这次合作里自动驾驶行业的技术人应该读出几个信号纯算法岗位的门槛越来越高但算法工程复合人才持续吃香。现在会训练模型的人太多了真正稀缺的是那种能把模型部署到车规级平台、性能调优到毫秒级、并且把整个数据管道跑通的人。理解数据闭环比理解模型结构更重要。很多人在研究最新的端到端网络架构但量产项目的瓶颈往往不在模型精度而在数据从车端到云端的链路是否健全、标注效率是否跟得上、仿真场景是否覆盖足够。懂数据工程、场景触发、自动标注这些方向的人在量产项目里话语权很大。学习路径上别只盯着PyTorch和Transformer计算平台的基本功也要补。比如理解CUDA架构、TensorRT的算子优化原理、嵌入式平台的显存带宽限制这些在工业界面试和实际工作中会越来越多地被考察。英伟达官方也有些免费的开发者资源和模型API可以练手上手成本并不高。5.3 对个人开发者如何低成本地参与这条技术链如果你不是汽车行业的人但对车载AI感兴趣实际上也有不少可以动手的方向。第一步是把感知这条链跑通比如用开源的YOLO或者BEVFormer基于公开数据集训练一个目标检测模型再把模型导出成ONNX、TensorRT引擎在本地跑起来测延迟。第二步是理解部署落地的差异用NVIDIA在云上的GPU资源训练一个规模适中的模型用英伟达提供的工具链做量化推理这就能体会到从科研代码到工程代码之间的距离。更进一步可以尝试搭一个微缩版的数据闭环数据集里挑几个corner case样本手动标注加一些离线数据增强再造一个简单的仿真场景看看模型在不同条件下的表现差多少。这套小巧但完整的练习比单纯刷几千道算法题对理解这套系统要有用得多。6. 写在最后我从这件事里看到的机会与代价我个人的一个体会是采埃孚和英伟达的这次联合开发比较清晰地划出了未来几年智能驾驶产业的分工模式AI算力和工具链由平台公司提供场景理解、安全工程和整车集成交给Tier 1来做车企则掌控产品定义和数据归属。这种模式下想靠单点技术突破吃遍整个市场的日子越来越少了落到具体干活的工程师身上你就得学会在别人搭好的平台上去做集成与创新。另外再说一句心里话。我见过很多团队追着最新的模型架构跑但最后项目栽在不断重复的数据标注和仿真测试上。车载AI系统是个典型的木桶效应工程感知精度、决策策略、算力效率、安全验证、数据合规每一块板子都不能太短。任何一家想在这个领域长期生存的公司都要把系统思维当成第一课而不是把眼光只放在模型的精度数字上。本文还有配套的精品资源点击获取
返回列表