DexRoam：从第一视角全身人类演示中学习移动双臂灵巧操作
移动双臂灵巧操作要求在单条轨迹内同时协调行走、全身姿态与手指级灵巧性，这种耦合正是机器人数据如此稀缺的原因。DexRoam 从仅用消费级 VR 头显加头戴立体相机采集的第一视角人类演示中学习这类技能，无需动作捕捉设备。三个显式对齐阶段（具身对齐、动作语义对齐、时序对齐）把人类动作映射进机器人动作空间，同时保持全身运动的连续与耦合，使标准 VLA 策略能够联合学习人类与机器人演示。在真机上，人类演示一致带来提升：GR00T N1.7 上平均成功率从 29% 升到 56%，π0.5 上从 32% 升到 57%，且用一半的机器人演示即可达到纯机器人训练的水平。
原文 · arXiv:2609.35761机器人演示是移动灵巧操作的瓶颈。这篇论文要问的是：如果把演示采集到人身上会怎样——同时不丢掉让技能成立的那种细粒度全身耦合。
背景
移动双臂灵巧操作是机器人领域最难的数据问题之一：单条轨迹必须同时协调行走、全身姿态与手指级灵巧性，而如今每小时的这类数据都必须在真机上采集。第一视角人类演示看似是显而易见的可扩展替代方案，但以往多数流水线为了让「人→机器人」迁移更容易，会简化人类动作——恰恰丢掉了这类任务赖以成立的细粒度耦合结构。结果是数据便宜了，却不再真正描述这项技能。
核心创新
DexRoam 让全身运动在整个人到机器人的迁移过程中始终保持连续与耦合。为规模化采集演示，它采用免追踪器的采集系统：仅需一台消费级 VR 头显加一个头戴立体相机，不需要外部相机或动作捕捉设备。随后三个显式对齐阶段把采集到的动作映射进机器人动作空间——具身对齐（人体到机器人形态）、动作语义对齐（人类动作到机器人动作）、时序对齐（两者之间的时间关系）。由于细粒度全身结构在这一映射中得以保留，人类与机器人演示可以由标准 VLA 策略联合学习，而不必特殊处理。
实验结果
- 在 GR00T N1.7 上，加入人类演示后真机平均成功率从 29% 提升到 56%。
- 在 π0.5 上，平均成功率从 32% 提升到 57%。
- 仅用一半的机器人演示即可达到纯机器人训练的水平。
- 消融实验确认三个对齐阶段缺一不可。
局限性
测得的结果仍在「大约一半尝试成功」的量级，因此这是一次大幅的数据效率提升，而非已经解决的策略。性能上限高度依赖免追踪器采集的质量——它只用 VR 头显与头戴立体相机，论文摘要未说明流水线对噪声或失败采集的鲁棒性，也未说明三个对齐阶段在测试之外的具身与任务族上是否依然成立。关于「不同 VLA 骨干」的提法，摘要中只有两个骨干给出了具体数值，更广的覆盖尚未确立。
行业影响
关键在于操作数据的经济学。如果一台 VR 头显加一个头戴相机就能产出演示，让标准 VLA 策略学会移动双臂灵巧操作，那么扩展机器人技能的瓶颈就不再是机器人的机时，而是人的时间——后者的成本与可获得性都要好得多。「一半机器人演示即可等效」这个结论是最直接的杠杆：它直接压缩了每一次数据采集战役的成本。对于在建人形或移动操作车队的团队而言，运营层面的问题也就从「要占用多少台机器人去采数据」变成「如何把人有效地装备起来」。