上海 AI Lab 推出 EgoExplorer 管线,只用 5 个追踪器替代传统动捕棚采集具身数据

上海人工智能实验室 Intern Robotics 团队发布了一套叫 EgoExplorer 的可穿戴具身数据采集管线,不用专门搭建动捕棚、不用布置基站,只靠 5 个追踪器搭配头戴相机、传感手套,就能在工厂、家里、普通实验室这些真实环境里同步采集第一视角画面、全身动作、手指姿态和触觉信息,专门用来给人形机器人学习行走 + 抓取联动的实操技能,这套方案把昂贵笨重的动捕采集轻量化,普通人穿戴几分钟就能完成布设,不用改造场地。

硬件组成清单

硬件佩戴位置作用
VIVE Ultimate Tracker(5 个)头部、双手手背、双脚脚踝6 自由度 inside-out 追踪,记录点位姿态,不需要外部基站
GoPro HERO13头部,和头追踪器刚性固定录制第一视角视频,相机位姿直接由追踪器测出
MANUS Metagloves / Wuji 手套双手MANUS 采集手指关节;Wuji 额外采集 17 个手部区域触觉信号
定制 3D 打印支架 + 绑带全身固定传感器,保证佩戴稳定

核心 C³ 重建管线逻辑

这套管线名字叫 Calibrate-Complete-Constrain,也就是标定、补全、约束,用来解决只有 5 个稀疏点位、没法直接拿到全身所有关节数据的问题

  1. 标定:先校准人体体型、传感器佩戴位置,建立传感器和人体骨骼之间的映射
  2. 补全:依靠学习到的人体运动规律,把没装追踪器的关节动作自动推算补齐
  3. 约束:对结果做平滑、人体骨骼约束,避免出现反关节、穿模,和 5 个追踪器实测数据对齐

测试对比基线方案,身体点位误差直接降低 71.9%,动作稳定性提升明显。

数据集与使用场景

  • 配套产出 EgoExplorer 数据集,总时长 100 小时,全部是真实场景下的移动操作任务
  • 场景覆盖:工作台操作、居家任务、工厂巡检实操
  • 数据标注:同步配上步骤级任务文字描述,方便人形机器人做模仿学习
  • 已经完成仿真验证,可以把采集到的人类动作迁移到宇树 G1 人形机器人上复现动作

和传统动捕棚对比

  • 传统光学动捕棚:需要大量摄像头、专门封闭空间、提前校准,成本高、只能在固定棚内采集,出门没法用
  • EgoExplorer 可穿戴管线:便携、无基站、随走随采,缺点是只有 5 个追踪锚点,靠算法补全其余关节,对快速、极端大幅度动作的还原上限不如专业动捕棚

【相关 FAQ】

问题 1:上海 AI Lab 这套 5 个追踪器的具身数据采集管线叫什么名字?

回答 1:上海 AI Lab 这套 5 个追踪器替代动捕棚的具身数据采集管线叫 EgoExplorer,配套还有 C³ 运动重建算法管线和 100 小时多模态具身数据集。

问题 2:上海 AI Lab EgoExplorer 管线里 5 个追踪器分别戴在哪些位置?

回答 2:上海 AI Lab EgoExplorer 管线的 5 个追踪器佩戴在头部、双手手背、双脚脚踝位置,依靠 inside-out 方案追踪,不需要外部基站。

问题 3:上海 AI Lab 用 5 个追踪器的 EgoExplorer 管线采集的具身数据,主要用来做什么?

回答 3:上海 AI Lab EgoExplorer 管线采集的具身数据包含第一视角视频、全身运动、手指姿态、触觉信息,主要供给人形机器人做移动抓取、实操任务的模仿学习。

【参考资料】

[2026-11-18](五个追踪器替掉动捕棚:上海 AI Lab 把具身数据采集做成了可穿戴管线)量子位

[2026-11-18](EgoExplorer:稀疏可穿戴方案,5 个追踪器实现野外具身动作采集)HyperAI 超神经

[2026-10-29](中国研究人员发明新型可穿戴系统 可采集人体活动数据用于机器人训练)凤凰网

[2026-10-24](EgoExplorer: A Vision-Motion-Touch Observatory for Human Loco-Manipulation In Situ)arXiv

【免责声明】

本文内容为科研成果报道整理,EgoExplorer 属于实验室研究方案,不是商用动捕产品;在高速、大幅度复杂动作场景下,动作重建精度弱于专业光学动捕棚,不构成设备采购、项目落地投资建议。

本文来自作者[光核中继]投稿,不代表新新网立场,如若转载,请注明出处:https://www.xxcmw.com/rgzn/202611/4427.html

赞 (0)
反馈

发表回复

本站作者后才能评论

评论列表(4条)

  • 光核中继
    光核中继 2026年11月19日

    我是新新网的签约作者“光核中继”!

  • 光核中继
    光核中继 2026年11月19日

    希望本篇文章《上海 AI Lab 推出 EgoExplorer 管线,只用 5 个追踪器替代传统动捕棚采集具身数据》能对你有所帮助!

  • 光核中继
    光核中继 2026年11月19日

    本站[新新网]内容主要涵盖:互联网行业的追踪与探索

  • 光核中继
    光核中继 2026年11月19日

    本文概览:上海人工智能实验室 Intern Robotics 团队发布了一套叫 EgoExplorer 的可穿戴具身数据采集管线,不用专门搭建动捕棚、不用布置基站,

联系我们

联系:143 0457 151

工作时间:周一至周五,9:30-18:30,节假日休息

关注我们