ARC:无需新数据即可提升机器人基础模型的「推理配方」
提升机器人基础模型的默认路径是:更大的模型、更多的示范、更昂贵的训练。ARC 主张存在一种高效的补充手段——只要「推理配方」对,就能显著改善现有最先进模型的零样本任务表现。这套配方由三部分组成。第一,有效的推理轨迹必须扎根于机器人的下一个动作,并解释这个动作的因果结构:它为何恰当、会产生什么效果。第二,一条可扩展的自动标注流水线能从既有示范中生成这些轨迹,于是 ARC-Trace-DROID 完全从 DROID 构建,无需采集任何新的机器人数据。第三,一套策略让预训练模型学会用这些轨迹来控制。π0.5 这类最先进的 VLA 与 Cosmos3-Nano-Policy 这类世界动作模型都能从中学习:ARC 在 RoboLab-120 与 MolmoSpaces 上刷新了最先进水平,在 RoboLab-Reasoning-50 上提升高达 50 个百分点,并把 π0.5 的真机任务成功率提升了 82.2 个百分点。
原文 · arXiv:2610.12386面对策略不够强的现实,机器人学习领域有一个默认的答案:采更多数据、训更大的模型。这个答案既贵又慢,而 ARC 提醒人们,同一批基础模型只要被以正确的方式教会「对自己的动作进行推理」,表现就能大幅提升。
背景
今天改进机器人基础模型,通常意味着扩规模:更大的模型、更多的机器人示范、更昂贵的训练。这很有效,但代价高,而且它留下了一个显而易见的问题——当前模型与更好模型之间的差距,有多少来自容量,又有多少来自它们所获得的监督?ARC 的立场是:存在一种高效而有用的补充办法——只要「推理配方」对,就能在无需新机器人数据、也无需基础级规模训练的前提下,显著改善现有最先进机器人基础模型的零样本任务表现。
核心创新
ARC 由三部分组成。第一,它明确了「有用」的推理轨迹长什么样:它应当扎根于机器人的下一个动作,并解释该动作的因果结构——这个动作为何恰当、会产生什么效果。正是这种扎根,把有助于控制的轨迹与泛泛而谈的评论区分开来。第二,它提供了一条可扩展的自动标注流水线,从既有示范中生成这些轨迹,这意味着 ARC-Trace-DROID 完全可以从 DROID 构建,而不必采集任何新的机器人数据。第三,它给出一套让预训练机器人基础模型学会用这些轨迹来控制的策略,并针对每种模型的架构与能力定制微调与推理方式。摘要指出,这对 π0.5 这类最先进 VLA 以及 Cosmos3-Nano-Policy 这类世界动作模型都成立。
结果
- ARC 在 RoboLab-120 与 MolmoSpaces 上刷新了最先进水平。
- 在 RoboLab-Reasoning-50 上取得高达 50 个百分点的提升。
- 在真机上,ARC 把 π0.5 的任务成功率提升 82.2 个百分点。
- 这些收益无需额外的机器人示范,也无需基础级规模的训练。
- ARC-Trace-DROID 完全从 DROID 自动生成。
局限
摘要给出了醒目的增益,却没有交代其范围:真机任务的数量、多次运行间的方差、以及 π0.5 那 82.2 个百分点的提升在各任务间如何分布均未报告,因此很难判断这一效果是均衡的,还是由某个子集拉动的。「前所未有」的说法是直接断言的,并未与一系列替代的监督配方做对比。由于轨迹是从既有示范自动标注而来,该方法会继承这些示范的分布与偏见;摘要也没有量化推理轨迹在控制时引入多少额外推理成本或延迟——而这恰恰是「高效」这一卖点的核心关切。适配策略是按架构分别描述的,但没有分析它跨模型家族时有多脆弱。
产业启示
如果一套推理配方能在没有新数据的情况下把零样本表现推动几十个百分点,那么对许多团队来说,瓶颈就不再是数据量,而是监督设计——而后者改动起来便宜得多。自动标注流水线是最可直接复用的资产:它把既有的示范语料变成轨迹监督,意味着过去在数据上的投入会持续产生回报。对于在商用 VLA 与世界动作骨干上做开发的团队,信息是:模型并不是唯一的杠杆——教会它如何对下一个动作进行推理,可能比下一轮扩规模更值钱。对采用方而言,悬而未决的问题是推理预算:推理轨迹只有在控制时开销足够小的情况下才算划算,而这一点论文尚未量化。