AW-0：用代码把世界动作模型变成可复用技能库

过去两年，机器人策略的两条主线各自发展：一条是世界动作模型（WAM），用视频生成提供视觉前瞻，让策略在动手之前先”看到”后果；另一条是 agentic robotics，用代码做任务规划、把能力封装成可调用技能，从而获得组合性与可解释性。两者的短板恰好互补——前者会预测，却只能一次性端到端地产出动作，无法显式复用已经学会的技能；后者会规划与复用，却缺少物理动力学的预测根基，代码里的技能调用并不真正”知道”接下来画面会变成什么样。

核心创新

AW-0 的做法是把代码提升为与视频、动作并列的第一等生成模态。三种模态在同一个混合 Transformer（mixture-of-transformers）中作为三条耦合的生成流联合建模：

• 代码专家负责生成参数化的技能例程和控制逻辑，也就是把”要做什么”写成可执行的结构；
• 视频专家生成未来视觉状态，为决策提供物理前瞻；
• 动作专家输出底层电机指令。

关键在于代码承担了双重角色。在模型内部，代码是多步预测与控制的结构骨架——它把长时间跨度的预测拆成有语义的步骤，而不是让视频模型自由漂移；在模型外部，同一段代码又是可复用的程序，可以在后续任务中被 agentic 执行器直接调用。这样，“预测”和”复用”不再是两个系统之间的接口问题，而是同一个表征的两面。

为了让技能库真正可扩展，作者还设计了自动化数据整理流程：给机器人视频和人类视频轨迹打上与之一致的程序标签，再把反复出现的例程归并、固化为可复用技能。这解决的是 agentic 方法最现实的瓶颈——技能库通常靠人工编写，规模上不去。

实验结果

论文在 RoboTwin 2.0 仿真基准和真实的双臂操作任务上做了评估，报告的结果是任务表现优于 VLA 与 WAM 两类基线，同时在语言跟随、语义推理和鲁棒性上有提升。作者用这些结果论证：把 agentic 代码引入世界动作模型，能够在同一个框架内打通规划、预测与执行。

需要说明的是，摘要给出的是相对结论而非具体数值，未披露各任务的成功率、提升幅度、推理延迟与训练成本，因此无法从摘要独立判断增益的量级。

局限

• 摘要未给出定量指标，RoboTwin 2.0 各项任务的成功率与真实双臂任务的试验规模都不清楚。
• 技能库的质量依赖自动标注流程：把人类与机器人视频对齐到程序标签，本身是一个可能引入噪声的环节，而摘要没有报告标注准确率或技能检索的失败模式。
• 三流联合生成意味着推理时需要同时跑代码、视频与动作专家，实时性与算力开销是这类架构的常见代价，摘要未涉及。
• 真实世界评估集中在双臂操作，尚未覆盖移动、导航或多机器人场景。

产业意义

对做通用操作系统的团队来说，AW-0 指出的方向比单点指标更重要：如果代码能够同时充当”预测的结构”和”复用的接口”，那么数据飞轮的形态会改变——每采集一段示教，不只是多了一个策略样本，还可能多了一个可被检索、可被组合的技能程序。这与当前 VLA 路线”用更多数据喂更大的端到端模型”是两种不同的规模化逻辑，前者更依赖数据整理与技能抽象的质量，后者更依赖数据量与算力。

对落地而言，这条路线还带来一个实际好处：代码是可审计的中间产物。当机器人动作由显式程序驱动时，失败归因、权限约束和行为回滚都比纯端到端策略更容易实现，这对需要安全认证的工业与家庭场景是实质性优势。短期内最值得关注的指标，是技能库在跨任务迁移时的命中率，以及三流联合推理能否压到可接受的控制频率。