EWAM：统一具身模型中涌现的逐层分工——从语义理解、视觉预见到动作生成

把语义、当前画面与预测未来都喂给模型，并不保证它会好好利用。令人意外的是，这篇工作什么都没管——模型自己长出了一条「先理解、再预见、后行动」的处理顺序。

背景

当下两条主线在争夺具身智能的叙事：VLA 模型强调把语言与视觉理解直接映射成动作，胜在语义，弱在对环境演变的刻画；WAM 则学习动作条件下的环境动力学，胜在预测，却常常缺乏一个结构化的、与动作生成强耦合的世界表征。已有一些系统试图把两者都暴露给策略，但由于缺少统一的架构约束，动作计算往往还是集中在某一个专家之上，另一路信息沦为陪衬。真正的问题因此是：能否设计一种架构，让语义、视觉预见和动作生成在同一个模型里各自到位，而不是被迫二选一？

核心创新

EWAM 的做法是提出一个以动作为中心的统一具身模型，其核心是非对称联合注意力：动作 token 可以在每一层读取语义特征、当前视觉、预测的未来帧以及动作自身，而各个感知专家依旧保留自己专有的角色——信息可以流向动作，动作却不会把感知专家的分工抹平。这种非对称性既保证了动作能与所有信息来源交互，又避免了简单的对称融合把不同模态的专长搅在一起。

最有意思的部分发生在训练之后。在没有任何逐层监督的前提下，模型自发形成了深度方向上的分工：浅层的动作查询主要关注视觉-语言特征，中层的动作查询转向预测的未来帧，深层的动作查询则主要关注动作 token 本身。也就是说，模型内部出现了一条「语义理解 → 视觉预见 → 动作形成」的有序推进，而且这条接力在多个任务间复现，并在不同的去噪步之间保持稳定。作者进一步用检查点追踪与因果干预说明，这种分工不是事后附会的解释：它是学出来的，且动作生成确实依赖它。预训练上，EWAM 同时使用跨本体的机器人轨迹与人类第一视角视频两种范式。

结果

• 在仿真与真机实验中，EWAM 超过了现有 VLA、WAM 与混合基线。
• 浅层关注视觉-语言、中层关注预测未来帧、深层关注动作 token 的逐层分工自发涌现，跨任务复现且随去噪步稳定。
• 检查点追踪与因果干预表明该分工是学习得到的，且动作生成依赖它。
• 人类第一视角数据同时改善跨本体迁移与真机鲁棒性；子任务阶段监督提升长时程任务的完成度。

局限

摘要报告的是相对基线的整体优势，未给出逐项的成功率数值、统计显著性或真机任务的具体构成，因此「超过基线」的幅度与稳定性不易独立核验。逐层分工被刻画为稳定且可复现，但作者也指出它依赖特定的训练范式与注意力设计；当骨干、模态集合或任务分布明显改变时，这条「先语义、再预见、后动作」的顺序是否仍会涌现，尚不清楚。作为基础模型类工作，其训练数据规模、算力开销与消融细节在摘要中均未展开，而这些恰恰决定了它能否被小团队复现。

产业启示

对做具身基础模型的团队而言，EWAM 的启示是架构层面的：让信息单向地流向动作、同时保留感知专家的分工，可能比把多路信息对称地揉在一起更有效。更实用的一点是那个涌现出来的处理顺序——如果「先语义、再视觉预见、后动作」是可复现的规律，它就能被当作诊断工具：训练中若动作查询过早地只盯着动作 token，可能意味着视觉预见这一环没有真正建立起来。人类第一视角数据能同时改善跨本体迁移与鲁棒性，也为「数据从哪来」提供了一个成本更低的补充来源：在真机轨迹之外，把大规模人类第一视角视频纳入预训练配方。