您的位置首页 >手机 >

英伟达推出车载AI模型Alpamayo 2 Edge 能边开车边推理

英伟达推出车载 AI 模型 Alpamayo 2 Edge:20 亿参数适配 Thor 平台,车端实时推理生成驾驶轨迹

英伟达面向车端部署推出 Alpamayo 2 Edge 车载驾驶 AI 模型,这是一款 20 亿参数的自适应推理视觉 - 语言 - 动作(VLA)模型,可在 NVIDIA DRIVE AGX Thor 车载计算平台上实时运行,一边接收环视摄像头画面、导航指令和自车运动历史,一边完成场景理解、因果链推理并输出未来驾驶轨迹,也就是在开车过程中本地完成推理,不依赖云端回传。模型骨干基于 NVIDIA Cosmos 3 Edge 的 2B Nemotron 推理架构,搭配扩散动作专家生成轨迹;为了在车载算力和延迟预算内跑起来,它采用自适应推理策略,只在需要时生成推理过程,减少常规驾驶下的无效 token 开销,再配合离线蒸馏、闭环强化学习、多分辨率输入、DFlash2 推测解码和 TensorRT 量化加速。官方技术博客给出的参考数据显示,优化后的模型在 DRIVE AGX Thor-X 上像素到轨迹的推理延迟为 160—190 毫秒,设计运行频率 10Hz;闭环强化学习后,驾驶表现比未做闭环 RL 的最佳检查点提升 48.9%。它与 340 亿参数的 Alpamayo 2 Super 形成分工:Super 是云侧教师模型,负责规划、场景理解、自动标注和训练小车模型,Edge 是蒸馏压缩后上车的学生模型。需要明确,该模型是面向车企和自动驾驶开发者的车端 AI 基础能力,量产装车仍需经过厂商数据微调、安全验证和法规审批,不等同于已落地的自动驾驶系统。

一、模型定位与核心规格

项目Alpamayo 2 Edge
厂商NVIDIA(英伟达)
产品系列NVIDIA Alpamayo 开放式推理 VLA 模型家族
模型类型自适应推理视觉 - 语言 - 动作(VLA)车端模型
参数量20 亿(2B)
推理骨干基于 Cosmos 3 Edge 的 2B Nemotron 推理骨干
动作生成扩散动作专家(Diffusion Action Expert)
目标硬件NVIDIA DRIVE AGX Thor
设计运行频率10Hz
参考延迟Thor-X 上像素到轨迹 160—190ms(视推理量而定)
配套评估AlpaJudge 人工校准评估与奖励模型

二、输入输出与工作流程

1. 模型输入

  • 环视多摄像头视频画面。
  • 时序上下文与历史帧。
  • 导航指令(文本 / 导航引导)。
  • 自车运动历史(ego-motion history)。
  • 可选视觉问答(VQA)输入。

2. 模型输出

  • 未来驾驶轨迹(轨迹控制点序列)。
  • 因果链(Chain-of-Causation, CoC)推理文本,说明决策依据。
  • 元动作预测。
  • 视觉问答答案与 2D 定位框(按任务需要)。

3. 上车推理步骤

  1. 环视摄像头持续采集多视角画面,系统做多分辨率编码。
  2. 模型结合导航指令和历史自车运动状态理解当前场景。
  3. 判断是否需要展开因果推理;常规路况直接输出轨迹,复杂场景再生成推理链。
  4. 扩散动作专家生成候选驾驶轨迹。
  5. 策略评估器与安全监控参与轨迹选择,降低风险。
  6. 推理结果通过车载运行时输出给车辆控制链路。

三、关键技术手段

1. 模型压缩与效率

  • 离线蒸馏:用 Alpamayo 2 Super 生成的因果链自动标注训练 Edge 模型,把大模型能力压缩到 2B 车端规模。
  • 自适应推理:按需生成推理过程,节省常规驾驶下的车载算力和 token 开销。
  • 多分辨率输入:在线高效编码环视观测,降低处理负担。
  • 推测解码:借助 DFlash2 加速在线推理,不牺牲推理质量。
  • 量化与编译:提供 TensorRT 与 TensorRT Edge-LLM 量化、推理加速方案。

2. 训练与评估

环节工具 / 方法说明
闭环强化学习后训练AlpaGym在仿真闭环中按动作后果端到端学习,闭环驾驶性能较最佳 checkpoint 提升 48.9%
闭环仿真评估AlpaSim测试驾驶决策与安全表现
推理质量评估AlpaJudge人工校准,分参考型(RB)与无参考型(RF),评分推理轨迹、筛选高价值样本、提供 RL 奖励
数据来源NVIDIA Physical AI 开放数据集25 个国家 / 地区多传感器真实驾驶数据,配因果链推理标签

3. 基准对比(官方口径)

  • 对比对象:Qwen-Drive-1.0(4B 参数)。
  • 对比维度:闭环驾驶、开环轨迹预测、场景理解与推理。
  • 仿真表现:在 AlpaSim 中,有责事故间隔距离约为对比模型的 60 倍。

四、与 Alpamayo 2 Super 的分工

维度Alpamayo 2 EdgeAlpamayo 2 Super
参数量20 亿(2B)340 亿(34B)
部署位置车端(DRIVE AGX Thor)云侧 / 开发端
角色蒸馏后的学生模型,实时上车推理教师基础模型,规划、标注、训练小车模型
主要任务场景理解、运动规划、轨迹生成驾驶预测、场景理解、自动标注、模型训练
许可方式开放权重供开发者优化部署商业许可,可直接用于开发

五、早期合作方反馈(官方披露口径)

合作方反馈要点
PORT早期接入后数天即在伦敦街景重建的闭环仿真中跑通;保持车道次数为 Alpamayo 1.5 的两倍以上,车道偏移恢复率高约 40%,开箱规划速度约为手工调优的 1.5 服务器模型两倍
Niulinx零样本评估中,位移误差(minADE)较 Alpamayo 2 Super 降低 13.6%,3 秒横向预测误差(RMSE)降低 46.1%;自有数据微调后位移误差再降 44.2%,数天内完成首台实车测试
Embedl不到 48 小时即在 AGX Thor 上把模型跑到 10Hz,实现实时规划

六、开发与部署路径

  1. 从开放渠道获取 Alpamayo 2 Super 权重,生成轨迹与推理标注。
  2. 用自有驾驶数据微调模型,配合强化学习后训练。
  3. 通过离线蒸馏和量化压缩出车端学生模型。
  4. 按 Alpamayo Developer Hub 的部署配方,在 DRIVE AGX Thor 上完成 FP8 标定、ONNX 导出、TensorRT 引擎构建。
  5. 在 AlpaSim 闭环仿真与真实数据重建场景中验证行为。
  6. 结合 Halos 安全框架、策略评估器和安全监控,规划量产安全与认证路径,取得商业生产授权。

【常见问题】

问题 1:英伟达 Alpamayo 2 Edge 是什么,为什么能在车端边开车边推理?

回答 1:Alpamayo 2 Edge 是英伟达推出的 20 亿参数车载 AI 推理 VLA 模型,专门为 DRIVE AGX Thor 车端计算平台优化;它接收环视摄像头画面、导航指令和自车运动历史,在本地完成场景理解、因果链推理并生成驾驶轨迹。模型采用自适应推理、离线蒸馏、多分辨率输入、DFlash2 推测解码和 TensorRT 量化压缩,把大模型能力压到车载算力预算内,从而实现车端实时推理。

问题 2:Alpamayo 2 Edge 在车载芯片上的实时性和性能表现如何?

回答 2:官方技术博客显示,按部署配方优化后,Alpamayo 2 Edge 在 DRIVE AGX Thor-X 上的像素到轨迹推理延迟为 160—190 毫秒,设计运行频率 10Hz;闭环强化学习后驾驶表现较未做闭环 RL 的最佳检查点提升 48.9%,在 AlpaSim 仿真中有责事故间隔距离约为 4B 对比模型 Qwen-Drive-1.0 的 60 倍,具体实车表现还需结合厂商数据和路测验证。

问题 3:Alpamayo 2 Edge 和 Alpamayo 2 Super 有什么区别?

回答 3:两者是 Alpamayo 模型家族中的车端学生模型与云侧教师模型分工:2 Edge 为 20 亿参数,蒸馏压缩后在 DRIVE AGX Thor 上做实时场景理解和轨迹生成;2 Super 为 340 亿参数,部署在云侧,用于驾驶预测、场景理解、自动标注和训练小型驾驶模型,提供商业许可,Edge 的离线蒸馏标注即来自 Super 生成的因果链推理。

问题 4:普通消费者使用搭载 Alpamayo 2 Edge 的车辆,是否就等于拥有自动驾驶?

回答 4:不能等同。Alpamayo 2 Edge 是面向车企和自动驾驶开发者提供的车端 AI 基础模型,量产装车需要整车厂用自有道路数据微调、通过仿真与实车安全验证、完成监管审批,并配合策略评估器、安全监控和 Halos 安全体系;当前公开的延迟、误差和事故间隔等数据来自官方仿真与早期合作方评估,不代表已获得量产自动驾驶资质,实际辅助驾驶能力以车企量产版本和法规认定为准。

【参考资料】

  • [2026-11-10](Running AV Reasoning Models Within Onboard Compute and Latency Limits)NVIDIA Technical Blog
  • [2026-10-21](欧洲出行领先企业基于 NVIDIA Hyperion 构建安全的汽车和无人出租车车队)NVIDIA 英伟达博客
  • [2026-10-20](October 20, 2026 | NVIDIA NIM for Alpamayo Documentation)NVIDIA Docs
  • [2026-11-10](面向无人驾驶出租车和智能汽车的开放模型 | NVIDIA Alpamayo)NVIDIA 中国官网
  • [2026-11-10](Open Models for Robotaxis and Autonomous Vehicles | NVIDIA Alpamayo)NVIDIA 英文官网

【免责声明】

本文内容基于英伟达官方技术博客、官网产品页及公开文档整理。Alpamayo 2 Edge 为面向开发者的车端 AI 模型方案,文中参数、延迟、性能提升、事故间隔倍数及合作方反馈均来自官方仿真或早期评估口径,不同传感器配置、道路场景、模型微调程度和硬件版本下结果会有差异;模型本身不等于具备量产自动驾驶资质,不构成对任何车型辅助驾驶或自动驾驶能力的承诺。量产落地需经整车厂商适配、安全验证、法规审批与市场认证,本文不构成购车或技术选型建议,最终以英伟达及整车厂官方发布为准。

今日大家都在搜的词: