您的位置首页 >机器人 >

CoRL 2026 他山科技助力英伟达,DexUMI 数采设备实现数据跨形态迁移

在 CoRL 2026 机器人学习会议上,英伟达正式推出 DexUMI 可穿戴灵巧手数采设备,他山科技为这套设备提供全套指尖、手掌触觉传感器,核心价值就是解决不同形态灵巧手之间技能没法通用、采集的数据很难迁移复用的痛点。之前训练灵巧手大多要针对每一款机械手单独采集数据,人手演示的数据直接给到机器人会因为结构差异、感知方式不一样,出现动作适配失败,也就是形态鸿沟;DexUMI 这套方案用可穿戴外骨骼手套搭配高精度触觉传感,人戴上之后直接上手操作物体,同步记录动作、视觉、触觉多模态信息,再经过算法转换,把人的操作技能迁移到不同型号的机器人灵巧手上,也就是英伟达 GR00T 2 模型的 X-Adapt 跨形态适配能力。整套落地流程是操作人员佩戴搭载他山触觉传感器的 DexUMI 手套做抓取、扭转、精细操作,设备同步采集三维力、接触位置、运动轨迹、画面信息,再由 GR00T 2 做数据转换,消除人手和机器人手的本体差异,生成可以直接给目标灵巧手使用的策略,不需要再针对每一款机械手重新大量采集数据。这套方案出来之后,灵巧手数据采集成本会明显下降,也方便科研人员、企业快速给不同硬件的人形机器人、灵巧机械手学习精细操作技能,同时英伟达已经公布相关开源计划,硬件、数据集、模型代码后续开放,他山科技也配套开源对应的触觉传感器方案。

一、DexUMI 硬件组成与他山触觉传感器参数

组成模块功能他山传感器关键指标
指尖触觉传感单元捕捉指尖接触、按压、滑动信号0.01N 测力分辨率,三维力检测,支持接近觉
手掌触觉传感单元感知大面积接触、支撑受力多点分布式阵列,曲面贴合,高频信号输出
可穿戴外骨骼结构匹配人手运动,映射关节姿态适配不同人手尺寸,动作映射到机器人关节空间
采集与传输主板多模态数据同步记录触觉、视觉、关节姿态时间戳对齐

二、跨形态数据迁移的两步核心机制

  1. 硬件层面缩小运动差距:DexUMI 外骨骼把人手的关节运动映射为机器人灵巧手可执行的动作,搭配实时触觉反馈,操作人员可以像平时徒手操作一样演示任务,不用适应遥控手柄。
  2. 软件层面消除视觉本体差距:算法把采集视频里的人手、外骨骼抹除,补入目标机器人灵巧手画面,训练数据视觉输入和机器人实际部署时保持一致,减少部署之后的性能衰减。

三、这套方案能完成的典型灵巧操作任务清单

  • 精细抓取类:软质水果、易碎小物件、薄卡片拾取
  • 旋转拧动类:拧瓶盖、转动旋钮、开关阀门
  • 双手协同类:分装物料、搅拌、组装小零件
  • 日常实操类:舀取谷物、划火柴、处理食材

四、现阶段方案存在的局限

  1. 跨形态迁移效果受两款机械手的运动学结构影响很大,结构差异过大的灵巧手,迁移之后成功率会明显下滑。
  2. 当前采集环境以室内静态场景为主,动态、强光照干扰、油污潮湿工况的触觉数据稳定性还需要持续优化。
  3. 虽然硬件方案开源,但想要复现完整的 GR00T2 跨形态迁移链路,对算力、数据处理能力有较高门槛。
  4. 目前主要面向单双手精细操作任务,大范围移动、高负载作业场景还不适用。

【常见问题】

问题 1:CoRL 2026 上他山科技助力英伟达推出的 DexUMI 数采设备,数据跨形态迁移是什么意思?

回答 1:CoRL 2026 上他山科技助力英伟达推出的 DexUMI 数采设备,数据跨形态迁移就是人手采集到的操作演示数据,经过模型转换之后,可以直接迁移到结构不一样的多款机器人灵巧手上学习同样的操作技能,不用为每一款机械手单独采集海量数据。

问题 2:在 DexUMI 这套数采设备里面,他山科技的触觉传感器起到什么作用?

回答 2:DexUMI 这套数采设备从指尖到手掌全部搭载他山科技触觉传感器,负责采集精细的压力、滑动、接触信息,补齐纯视觉看不到的交互细节,是采集高质量视触融合数据、保障跨形态迁移效果的关键硬件。

问题 3:DexUMI 和英伟达 GR00T 2 模型是什么配套关系?

回答 3:DexUMI 是配套英伟达 GR00T 2 世界动作模型的数据采集硬件,采集好的多模态演示数据输入 GR00T 2,由模型完成 X-Adapt 跨形态适配,实现灵巧操作技能跨机械手迁移。

问题 4:他山科技和英伟达这次在 CoRL 2026 的合作,和之前的合作有什么区别?

回答 4:他山科技此前是英伟达 Isaac Sim 全球首个触觉仿真合作伙伴,合作停留在仿真层面;这次 DexUMI 项目把触觉方案落地到实体硬件,打通仿真、实体采集、模型训练的闭环。

【参考资料】

[2026-11-11](他山科技助力英伟达最新成果,DexUMI 数采设备实现数据跨形态迁移)投资界

[2026-11-10](他山科技成为英伟达最新数采设备触觉传感器服务商)贝壳财经

[2026-11-10](英伟达 DexUMI 数采设备采用国产他山科技触觉传感器)腾讯新闻

[2026-11-07](NVIDIA at CoRL 2026: Advancing Robot Learning)NVIDIA 开发者论坛

【免责声明】

本文仅基于 CoRL 2026 公开演讲、新闻信息做产业科普解读,不构成传感器采购、机器人项目开发、模型复现的技术指导;DexUMI、GR00T2 的开源时间、数据集内容、跨形态迁移成功率以英伟达官方发布文档为准,触觉传感器实际性能以他山科技规格手册和实测结果为准。

今日大家都在搜的词: