您的位置首页 >人工智能 >

具身第一云完成 Ego 视频位姿恢复优化,GPU 用时最高削减 43%,70 余家机器人企业接入使用

百度智能云推出的具身第一云迎来核心效率升级,针对 Ego 第一视角视频的相机位姿恢复链路做系统性优化,MegaSaM 方案每小时视频的 GPU 处理时长直接砍掉 43%,配套 Droid-W 方案 GPU 耗时下降 31%,目前已经有 70 多家机器人公司接入这套具身云平台做数据处理和模型训练。Ego 视频也就是机器人、穿戴相机采集的第一视角画面,位姿恢复是从连续画面反向算出相机的位置、朝向、运动轨迹,是建图、仿真、具身世界模型训练的前置步骤,旧版本处理链路经常出现 CPU 线程过载、GPU 空等数据、大量重复计算的问题,拉高了 Ego 数据集预处理成本,也是很多机器人团队大批量采集 EgoLife 视频之后算力卡脖子的环节。整套优化落地的操作路径很清晰,先限制单任务 CPU 线程上限,解决超配线程抢占核资源的问题,再搭建预加载流水线,GPU 在运算当前帧的时候提前缓存下一批输入数据,把可复用的中间特征缓存下来,同时把适合并行的计算算子迁移到 GPU 上执行,减少 CPU-GPU 之间的数据等待,优化之后,机器人厂商上传 Ego 视频到具身第一云,选择 MegaSaM 或者 Droid-W 位姿恢复管线,就能直接用这套提速版本,相同 GPU 资源可以处理更多 Ego 素材,降低具身数据预处理的成本,加快机器人模型迭代速度。

一、两套位姿恢复方案优化对比表

方案名称优化前每小时视频 GPU 耗时优化后每小时视频 GPU 耗时GPU 用时降幅主要适用场景
MegaSaM11.36 GPU 小时6.48 GPU 小时43%高精度 Ego 视频重建、大规模 EgoLife 数据集处理
Droid-W基准值基准值31%轻量化、快速相机轨迹解算,机器人在线建图前置处理

二、本次 Ego 位姿恢复优化的核心手段清单

  1. CPU 线程管控:8 卡服务器场景里,限制任务线程数量,避免线程数远超物理逻辑核,消除线程争抢、调度拥堵
  2. 流水线预取:异步加载帧数据,GPU 在执行计算时提前准备后续批次图像,消除 GPU idle 等待时间
  3. 中间结果缓存:特征提取、关键点匹配这类重复计算结果做缓存,同一段视频内部复用,减少重复运算
  4. 算子异构迁移:把适合并行的特征匹配、光束平差相关计算下沉到 GPU,减轻 CPU 压力
  5. 资源调度适配:具身第一云平台自动根据任务类型分配 CPU/GPU 配比,不用开发者手动调参

三、具身第一云可以承接的 Ego 数据处理链路

  • Ego 视频上传、抽帧、画质清洗
  • 相机位姿恢复、轨迹输出
  • 三维重建、点云生成、场景建图
  • 数据集标注、筛选、打包,供给具身世界模型训练
  • 仿真数据对齐、虚实融合素材生成

四、对机器人开发者带来的实际收益

  • 相同 GPU 预算,能处理接近 70% 更多的 Ego 第一视角视频素材
  • 大批量 EgoLife 数据集预处理周期缩短,不用长时间排队等待云算力
  • 不用团队自研 SLAM、位姿解算加速代码,直接调用云平台封装好的管线
  • 降低人形、四足机器人采集第一视角交互数据的门槛,方便积累交互视频数据

五、使用限制与注意要点

  • 提速幅度基于官方 EgoLife 测试集得出,画面运动剧烈、弱纹理场景下提升比例会浮动
  • 优化只针对预处理阶段的位姿恢复环节,不改变模型本身重建精度
  • 70 余家机器人公司为平台接入客户总量,并非全部客户都在用这套位姿管线
  • 属于百度百舸算力 + 具身第一云配套能力,需要接入百度智能云具身平台使用

【常见问题】

问题 1:具身第一云 Ego 视频位姿恢复优化,砍掉 43% GPU 用时是哪一套方案?

回答 1:具身第一云 Ego 视频位姿恢复优化里,砍掉 43% GPU 用时的是 MegaSaM 管线,另一套 Droid-W 方案优化后 GPU 用时下降 31%。

问题 2:具身第一云里面的 Ego 视频位姿恢复,在机器人研发里起到什么作用?

回答 2:具身第一云的 Ego 视频位姿恢复,用来从第一视角视频反向解算出相机位置、朝向和运动轨迹,是三维重建、场景建图、具身世界模型训练必不可少的前置步骤。

问题 3:70 多家机器人公司接入的具身第一云,Ego 位姿提速优化需要开发者改代码吗?

回答 3:不需要,具身第一云 Ego 位姿提速优化在云平台底层完成,开发者调用 MegaSaM、Droid-W 管线时直接生效,不用改动业务代码。

问题 4:具身第一云 Ego 视频位姿恢复优化,会不会降低重建、轨迹解算的精度?

回答 4:具身第一云本次 Ego 视频位姿恢复优化聚焦算力调度和流水线提速,官方测试里没有牺牲位姿恢复、三维重建的精度指标。

【参考资料】

[2026-11-12](70 + 机器人公司投出具身第一云:优化 Ego 视频位姿恢复,砍掉 43% GPU 用时)量子位

[2026-11-12](百度智能云具身第一云升级,Ego 视频重建算力大幅优化)ZAKER

[2026-11-12](百舸异构算力支撑具身智能 Ego 数据预处理加速)百度智能云开发者资讯

【免责声明】

本文具身第一云 Ego 视频位姿恢复相关资讯为公开技术信息整理,43%、31% 的 GPU 降幅基于官方测试数据集,实际业务场景的提速效果受视频纹理、画面运动、服务器资源波动影响;平台功能、计费、开放权限由百度智能云动态调整,一切以百度智能云具身第一云官方文档为准。

今日大家都在搜的词: