PRISM：用少量真实视频，放大出可扩展的人形机器人移动操作能力

让人形机器人接到指令后能搬起箱子、油桶或周转箱，首先是个数据问题，其次才是控制问题。能教会它这件事的视频很稀少，因为片段既要拍到人的全身，又要拍到人与物体之间不被遮挡的交互。PRISM 想回答的是：几段好的录像，能否被放大成一个足够泛化的训练集？

背景

视觉模仿是通往「既能移动、又能操作」的通用人形机器人最有希望的路线之一，但它撞上了一堵现实的墙：它需要的演示很难拍。片段必须同时展现人的全身和未被遮挡的人—物交互，并且要有足够的多样性，而小规模人工采集根本达不到。机位不对，手与物体的接触就被挡住；只录一个例子，策略就会过拟合到那一个物体和那一种构型。于是，移动操作的规模化卡在了「高质量交互视频的获取」上，而不是模型容量上。

核心创新

PRISM 是一条为打破这一数据瓶颈而设计的「实—虚—实」框架。第一阶段用视频到视频（V2V）生成，把少量真实示例视频扩展成数百段多样化的「反事实」人—物交互视频，把一条演示扩成一个合理的变体族。第二阶段是一条以接触为锚的实-虚流程，它同时重建人与物体的运动，并把这些生成出来的、并不完美的视频数据重定向为物理上合理的轨迹。这里刻意追求的收益是类内差异：由于反事实视频在类别内改变了物体实例、外观与构型，一条在其上训练的策略能够泛化到同类中未见过的物体，而不是死记某一段片段。最后，整条流水线又被重新接回现实——把训练好的策略部署到真机机器人上。

结果

• 完整流水线在真机人形机器人上得到演示，全程不做任何真实世界微调。
• 仅依靠机载深度观测，该机器人即可完成对箱子、油桶、周转箱与球类等物体的抓取、搬运与放置。
• 策略在这些物体的新实例、新尺寸与新初始构型上都能成功。
• 训练数据来自把少量真实视频放大为数百段反事实人—物交互视频，并进一步重定向为物理上合理的轨迹。

局限

论文的证据主要是行为层面的，而非一张大规模量化基准表：它在一组物体类别上演示了流水线可行、能力成立，但没有给出跨大量任务与场景的成功率统计。泛化范围被明确限定为「每个类别内未见过的物体」，因此跨类别或开放集的泛化尚未得到验证。仅使用机载深度对部署是优势，但也限制了感知在困难场景中的分辨能力。此外，由于完全不做真实世界微调，V2V 生成或重定向环节引入的任何伪影都会被策略原样吸收——也就是说，能力上限由合成流水线本身决定。

产业启示

对人形机器人厂商而言，最关键的结论关乎「经济学」：如果少量真实片段加上生成式放大、再加物理锚定的重定向，就足以启动搬运能力，那么新增一项移动操作技能的成本，就从「大规模拍摄」转移到了「工程化并运行一条流水线」——这是一种可扩展性高得多的作业单元，也正是企业希望获得的取舍。仅靠机载深度运行，对物料清单与形态设计同样重要，因为它意味着部署时无需外部动捕或密集传感。对产品团队而言，真正悬而未决的是「覆盖面」：类别内泛化确实有用，但真实部署中出现的物体，未必能整齐地落进流水线预设的那几个类别里。