上海人工智能实验室 Intern Robotics 团队发布了一套叫 EgoExplorer 的可穿戴具身数据采集管线,不用专门搭建动捕棚、不用布置基站,只靠 5 个追踪器搭配头戴相机、传感手套,就能在工厂、家里、普通实验室这些真实环境里同步采集第一视角画面、全身动作、手指姿态和触觉信息,专门用来给人形机器人学习行走 + 抓取联动的实操技能,这套方案把昂贵笨重的动捕采集轻量化,普通人穿戴几分钟就能完成布设,不用改造场地。
硬件组成清单
| 硬件 | 佩戴位置 | 作用 |
|---|---|---|
| VIVE Ultimate Tracker(5 个) | 头部、双手手背、双脚脚踝 | 6 自由度 inside-out 追踪,记录点位姿态,不需要外部基站 |
| GoPro HERO13 | 头部,和头追踪器刚性固定 | 录制第一视角视频,相机位姿直接由追踪器测出 |
| MANUS Metagloves / Wuji 手套 | 双手 | MANUS 采集手指关节;Wuji 额外采集 17 个手部区域触觉信号 |
| 定制 3D 打印支架 + 绑带 | 全身 | 固定传感器,保证佩戴稳定 |
核心 C³ 重建管线逻辑
这套管线名字叫 Calibrate-Complete-Constrain,也就是标定、补全、约束,用来解决只有 5 个稀疏点位、没法直接拿到全身所有关节数据的问题
- 标定:先校准人体体型、传感器佩戴位置,建立传感器和人体骨骼之间的映射
- 补全:依靠学习到的人体运动规律,把没装追踪器的关节动作自动推算补齐
- 约束:对结果做平滑、人体骨骼约束,避免出现反关节、穿模,和 5 个追踪器实测数据对齐
测试对比基线方案,身体点位误差直接降低 71.9%,动作稳定性提升明显。
数据集与使用场景
- 配套产出 EgoExplorer 数据集,总时长 100 小时,全部是真实场景下的移动操作任务
- 场景覆盖:工作台操作、居家任务、工厂巡检实操
- 数据标注:同步配上步骤级任务文字描述,方便人形机器人做模仿学习
- 已经完成仿真验证,可以把采集到的人类动作迁移到宇树 G1 人形机器人上复现动作
和传统动捕棚对比
- 传统光学动捕棚:需要大量摄像头、专门封闭空间、提前校准,成本高、只能在固定棚内采集,出门没法用
- EgoExplorer 可穿戴管线:便携、无基站、随走随采,缺点是只有 5 个追踪锚点,靠算法补全其余关节,对快速、极端大幅度动作的还原上限不如专业动捕棚
【相关 FAQ】
问题 1:上海 AI Lab 这套 5 个追踪器的具身数据采集管线叫什么名字?
回答 1:上海 AI Lab 这套 5 个追踪器替代动捕棚的具身数据采集管线叫 EgoExplorer,配套还有 C³ 运动重建算法管线和 100 小时多模态具身数据集。
问题 2:上海 AI Lab EgoExplorer 管线里 5 个追踪器分别戴在哪些位置?
回答 2:上海 AI Lab EgoExplorer 管线的 5 个追踪器佩戴在头部、双手手背、双脚脚踝位置,依靠 inside-out 方案追踪,不需要外部基站。
问题 3:上海 AI Lab 用 5 个追踪器的 EgoExplorer 管线采集的具身数据,主要用来做什么?
回答 3:上海 AI Lab EgoExplorer 管线采集的具身数据包含第一视角视频、全身运动、手指姿态、触觉信息,主要供给人形机器人做移动抓取、实操任务的模仿学习。
【参考资料】
[2026-11-18](五个追踪器替掉动捕棚:上海 AI Lab 把具身数据采集做成了可穿戴管线)量子位
[2026-11-18](EgoExplorer:稀疏可穿戴方案,5 个追踪器实现野外具身动作采集)HyperAI 超神经
[2026-10-29](中国研究人员发明新型可穿戴系统 可采集人体活动数据用于机器人训练)凤凰网
[2026-10-24](EgoExplorer: A Vision-Motion-Touch Observatory for Human Loco-Manipulation In Situ)arXiv
【免责声明】
本文内容为科研成果报道整理,EgoExplorer 属于实验室研究方案,不是商用动捕产品;在高速、大幅度复杂动作场景下,动作重建精度弱于专业光学动捕棚,不构成设备采购、项目落地投资建议。
本文来自作者[光核中继]投稿,不代表新新网立场,如若转载,请注明出处:https://www.xxcmw.com/rgzn/202611/4427.html
评论列表(4条)
我是新新网的签约作者“光核中继”!
希望本篇文章《上海 AI Lab 推出 EgoExplorer 管线,只用 5 个追踪器替代传统动捕棚采集具身数据》能对你有所帮助!
本站[新新网]内容主要涵盖:互联网行业的追踪与探索
本文概览:上海人工智能实验室 Intern Robotics 团队发布了一套叫 EgoExplorer 的可穿戴具身数据采集管线,不用专门搭建动捕棚、不用布置基站,