Rho:开源权重的 VLA 模型,用十五次纠正示范适配一条新机械臂

· Editorial Team estimated
VLA 开源权重 双臂操作 微调 在线自适应 基础模型

通用机器人模型必须同时具备宽泛的视觉与语言能力、跨不同本体结构的精准控制,以及针对新任务的低成本适配。Rho 是一系列面向双臂操作的开源权重视觉-语言-动作(VLA)模型,目标是在三种具有代表性的双臂平台上实现数据友好型任务适配:YAM Box、UR AI Trainer 与 FR3 Duo。作者系统消融了动作专家(action expert)的架构与训练配方,并在受控仿真与真机实验中表明,本体结构中训练阶段(embodiment midtraining)能提升下游适配效果。由此得到的各 Rho 变体在所评估的任务、本体与基线上达到或超过现有开源权重 VLA。Rho 还内建了在线自适应机制:一个内部隐策略从纠正反馈中学习,为冻结的流匹配动作专家挑选以观测为条件的噪声输入,因此少至 15 段纠正示范就足以应对处于离线微调分布边缘的情形。基础模型与各本体的检查点均已开源。

原文 · arXiv:2609.38164

一个机器人基础模型能否真正在产线上站住脚,取决于两件事:它迁移到你手上那条具体机械臂的效果如何,以及修复失败案例需要多少数据。Rho 正是围绕这两点设计的。

背景

物理世界的 AI 模型既要宽泛泛化、又要精准控制,还要跨越现实中形形色色的机器人本体。但实际情况是,看起来最强的模型往往只在单一本体、单一训练配方上被评估,「适配」的叙事则相当含糊:团队被告诉某个模型很「通用」,却无人说清当它遇到一条新机械臂、或遇到分布外情形时,究竟发生了什么变化。数据友好型适配才是真正的痛点,因为工业机器人里昂贵的那部分,不是一次性训练基础模型,而是为每个平台、每种长尾场景反复修复它。

核心创新

Rho 是一系列面向双臂操作的开源权重 VLA 模型,专门为跨三种本体的数据友好型任务适配而设计,这三种本体分别代表科研实验室与工业界的双臂机器人:YAM Box、UR AI Trainer 与 FR3 Duo。有两项设计撑起了它的贡献。其一,作者系统消融了动作专家的架构与训练配方,并通过受控仿真与真机实验表明,「本体结构中训练」这一在目标平台上的中间训练阶段,能可测量地提升下游适配效果。其二,Rho 把在线自适应做进了模型:一个内部隐策略从纠正反馈中学习,为冻结的流匹配动作专家挑选以观测为条件的噪声输入。由于被适配的只有这个轻量模块,从人的纠正中学习的代价得以保持在很低的水位。

结果

  • 面向 YAM Box、UR AI Trainer 与 FR3 Duo 的 Rho 变体,在所评估的任务、本体与基线上达到或超过现有开源权重 VLA,整体表现最强。
  • 在受控仿真与真机上均表明,本体结构中训练能改善下游适配。
  • 在适配那个轻量隐模块时,少至 15 段纠正示范,就足以让 Rho 应对其离线微调分布边缘的任务情形。
  • 基础 Rho 模型与各本体专属检查点均已开源,以支持科研实验与实际工业应用。

局限

相关结论都是相对于一组既定的开源权重基线、任务与本体而言的,因此「整体最强」只在这一评估范围内成立,而非泛指所有操作任务。覆盖三种双臂平台,已经比多数单本体发布更宽,但相对整个机器人群体而言仍是很小的一角;论文并未说明该配方能否同样好地迁移到这些代表性设计之外的机械臂。在线自适应的结论是围绕「训练分布边缘的情形」展开的;反复纠正能否累积成持久的能力提升,还是会在长时间运行中漂移或退化,本文并未给出定论。此外,「数据友好」仍需要基础模型与那一段结构中训练,因此总投入比从零训练低,但并不为零。

产业启示

对任何要把操作能力集成进产线的人来说,真正的价值在「适配的经济学」上,而不在基准榜首。一个已开源、带各本体检查点的基础模型,免去了内部自训基础模型的需要;而一套能用大约十五段纠正示范修好长尾失败的配方,则把集成从「数月的采数工程」变成「一次短暂的现场标定」。这正是「演示好看」的模型与「客户现场真能上线」的模型之间的差别。但规划时也要正视它的边界:团队应当预期亲自跑一遍本体结构中训练,并验证纠正效果能否长期保持,而不能假定「十五段」这个数字可以不加调整地照搬到自己的机械臂与任务上。