MachEmbodied-U0：一个既理解任务、又能预测场景如何变化的具身基础模型

如今的机器人策略被要求足够通用，而「通用」这件事不断分裂成两个阵营。一个从语言与视觉出发：视觉-语言-动作模型从大预训练骨干那里继承语义理解，把观测与指令直接映到动作。另一个从未来出发：世界模型或世界-动作模型学习场景如何演变，再把这种预测折进策略学习里。两者瞄准的是同一批操作任务，而失败的地方各不相同。

MachEmbodied-U0 想说的是：这种分裂并非必要。它的主张是，单一模型可以既联合预测未来观测、又生成动作，同时仍然携带决定「该在场景的哪里动手」的语义与空间结构。

背景与问题

论文背后的设计压力有两个。第一，VLA 模型极少显式建模场景动态：它们学的是「从当前可见之物映到当前该做之事」，任何预见都是隐式的、未经检验的。这对操作任务并不合适——在操作里，被控制的对象恰恰是动作带来的后果。第二，世界-动作模型确实预测未来，但把视觉预测与控制耦合起来，本身并不暴露任务相关的语义与空间结构，也就是「正在尝试哪个子任务、正在抓取哪个可供性」，而细粒度操作正是依赖这些。论文的前提是：这两者其实是同一个问题的两半——理解告诉模型什么重要，动态告诉它接下来会发生什么，动作随之而来。

核心创新

ME-U0 是一个统一的具身基础模型，通过 Mixture-of-Transformers 架构把理解专家与生成专家连接起来。四个设计选择真正承重：

• 把子任务预测与可供性定位用作条件。 它们不是辅助头，而是引导「视觉动态 + 动作」的联合生成。正是这一点让语义与空间结构始终留在回路里，而不是消融进动作头。
• 联合目标上的流匹配。 视觉动态与动作在同一个框架里联合生成，于是「场景将变成什么」与「该做什么」是在一起训练的，而不是事后拼接。
• 多模态的视觉动态。 被预测的未来不是一帧 RGB：它覆盖未来的 RGB、深度、表面法线与光流，分别在表观、几何与运动上提供互补监督。把法线与光流和颜色一起预测是个有分量的选择——它逼迫模型去表示那些纯光度目标会留下歧义的部分。
• 多速率旋转位置编码（MRPE）。 MRPE 把视觉动态与细粒度控制对齐，处理的是粗粒度视觉预测与高频动作流之间的速率错配。

预训练使用了约 4200 小时的精选示教数据，来源涵盖机器人数据集与第一视角数据集。

结果

• RoboDojo（仿真）： 平均分 17.66，且只使用该基准原生提供的监督。
• LIBERO： 平均成功率 99.0%。
• LIBERO-Plus： 平均成功率 82.5%。
• 真机： 在真实机器人操作任务上另做了验证，说明效果不限于仿真。
• 零样本： 在没有对应下游监督的情况下，ME-U0 在仿真与真实观测上都展示了子任务预测、可供性定位与视觉动态能力。

两个基准数字里，更有信息量的是 LIBERO-Plus：干净版 LIBERO 在强系统之间已接近饱和，扰动版才是拉开差距的地方。而从战略上看更值得关注的是零样本结果：它暗示定位与动态能力是预训练模型的可迁移属性，而不是逐基准微调出来的产物。

局限

摘要报告的是聚合基准分，而非逐任务、逐扰动的细分，因此 ME-U0 究竟在哪些子任务、哪些扰动、哪些本体上失效，读者看不到。RoboDojo 的 17.66 没有给出量纲或上限，很难校准。真机验证只有定性描述：没有成功率、没有与已部署基线的对比、也没有说明任务难度。预训练消耗约 4200 小时、且数据主要来自既有的机器人与第一视角语料，这意味着论文的贡献中相当一部分是数据整理与配比配方，而这一配方在摘要里没有被刻画。此外，仅凭成功率很难区分模型是真正「理解」了任务还是在模仿任务——论文自己的零样本结果最接近对这一点给出证据，但摘要里没有量化。最后，论文没有报告训练或推理成本，而对一个意在实时控制机器人的基础模型来说，这是实质信息。

行业启示

战略层面的论断是：机器人领域也许不需要两个互相竞争的模型家族。如果单一骨干能同时承载语义定位、未来预测与动作生成，那么集成负担就转移了——团队不必在部署时把 VLM、动态模型和策略缝在一起，而是交付一个模型、一条服务链路。就预训练这件事而言，真正有价值的是可迁移的零样本定位与动态能力：正是这些能力让一个骨干值得被用于没人微调过的任务，也正是这一点把一个研究模型变成平台。

这里还有一条关于评测的启示：下游成绩只使用各基准原生的监督，而不是额外加任务专用头或额外数据，是一个有纪律的默认做法；再把它与一个尚未饱和的基准（如 RoboDojo）配合，对比才有信息量。对正在评估具身基础模型的团队而言，这篇论文引出的实际问题恰是它没有回答的那些：服务延迟、显存占用，以及那套 4200 小时的配方需要复现多少，才能拿到所宣称的迁移效果。