LAW：把语言推理、动作生成与世界模型拧成一个闭环，长时程操作拿下 RoboTwin 开源 SOTA
长时程操作要求机器人既能拆解子任务，又能判断执行到哪一步，还要在动作层面保持连贯。LAW 把视觉语言模型与「世界-动作模型」用一个语义子任务进度信号串成闭环：VLM 负责规划剩余子任务、评估候选动作价值并异步判断执行状态，世界-动作模型负责联合预测视频与动作，二者通过双流分层视觉记忆共享时序上下文。在 50 个 RoboTwin 任务上平均成功率 94.21%，换用 OpenWAM-alpha 骨干后升至 95.56%，创下该基准的开源最好成绩；三个真实长时程任务上平均成功率 65%，而 pi0.5 为 28.33%、Fast-WAM 为 25%。值得注意的是，其 2B 参数的 VLM 在多模态推理上还优于使用 Embodied-R1.5 与 GPT-5.5 High 的变体。
原文 · arXiv:2610.23334让机器人做一件长任务，难点从来不是单个动作有多难，而是它能不能记住自己做到哪儿了、下一步该干什么。
背景
世界-动作模型（World-Action Model）把动作与未来世界状态放在一起预测，为操作策略提供了物理层面的前瞻能力。但长时程操作还有另一半问题：机器人需要理解语言描述的目标、把目标拆成子任务、判断当前执行是否真的推进了进度，并在失败后决定是继续、重试还是切换子任务。纯世界模型不擅长这种符号层面的推理，纯 VLM 又缺少可执行的动作接口。已有的分层方案往往把规划器与执行器做成两个松耦合模块，进度判断靠外部规则或人工设定的成功检测器，一旦执行偏离计划，上层很难及时察觉。
核心创新
LAW 的做法是把「语义子任务进度」当作贯穿三层的公共变量。外层是一个混合专家的视觉语言模型，它规划剩余子任务，对世界-动作模型提出的多个动作候选估计价值并做融合，同时异步评估执行状态，用于支撑继续执行与子任务切换——异步这一点很关键，评估不必阻塞动作输出，控制频率因此不会被推理延迟拖垮。
内层的世界-动作模型用 Mixture-of-Transformer Experts 同时处理视频与动作两种模态，既有模态专属计算，也有共享计算。两套模型通过双流分层视觉记忆维持时序上下文：一条流保存细粒度的近期观察，另一条保留更长跨度的任务脉络。训练上，LAW 引入子任务局部的价值学习，把动作评估对齐到语义目标，并且保留失败轨迹中成功前缀的监督信号——失败的长任务并非全无价值，前半段做对的部分仍然能教会模型什么是好动作。
结果
- RoboTwin 50 个任务平均成功率 94.21%；把世界-动作模型骨干替换为 OpenWAM-alpha 后达到 95.56%，为该基准开源最好成绩。
- 三个真实机器人长时程任务平均成功率 65%，对比 pi0.5 的 28.33% 与 Fast-WAM 的 25%。
- 仅 2B 参数的 VLM 在多模态推理上优于使用 Embodied-R1.5 和 GPT-5.5 High 的变体。
局限
RoboTwin 上的高分仍属仿真环境，真实世界证据只有三个长时程任务，65% 的平均成功率距离产线可靠性还有明显距离。摘要没有给出推理延迟、控制频率与显存占用，而「异步状态评估」的实际调度开销恰恰决定了这套架构能否跑在机载算力上。此外，方法依赖较强的 VLM 与视频生成骨干，训练数据规模、跨本体迁移能力、以及非桌面场景（移动、双臂协同、 deformable 以外对象）的表现均未披露。
产业启示
这项工作的产业意义在于接口设计而非单点指标。把「子任务进度」显式化为可估计、可传递的变量，等于给语言层与动作层装了一个共同的仪表盘：上层不必猜测底层执行到哪，底层也知道当前动作服务于哪个语义目标。对做长时程装配、整理、实验室自动化的团队来说，这种结构比再堆一个更大的端到端模型更务实——它允许规划器换、世界模型换、动作专家换，只要进度语义保持一致。2B VLM 胜过更大规模推理变体也提示，具身场景的瓶颈更可能在接口与数据对齐，而非纯粹的语言模型参数量。