TacClaw-Infinity：面向灵巧操作的大规模视—触—语—动作数据集
触觉操作数据难以规模化，现有多模态数据集又普遍缺少一致的质量控制与结构化监督。TacClaw-Infinity 给出了迄今规模最大的结构化视—触—语—动作（VTLA）数据集：用 TacClaw 这一触觉增强、UMI 风格的手持采集接口，同步记录视觉观测、指尖触觉与末端轨迹，且采集时无需目标机器人。数据来自居家、实验室、工厂、零售与户外等全球多点协同采集，合计超过 1 万小时、100 万条回合、10 亿帧，覆盖 1000 多种任务。团队还构建了轨迹重建、多模态质控、本体感知过滤与结构化标注（接触分割、子任务描述、空间定位）的可扩展流水线。数据层面验证了采集接口、动作空间兼容性与标注质量；模型层面则展示了对三台异构机器人的跨本体迁移，且无需机器人专属演示。
原文 · arXiv:2610.20320机器人学习缺的往往不是算法，而是敢拿来训练的真实触觉数据。这篇工作把数据规模推高了一个数量级，并补上了配套的质量与标注管线。
背景
大规模机器人学习越来越依赖多样的人类演示，但触觉操作数据依旧难以规模化：指尖接触信号要么依赖专用硬件、要么采集流程繁琐。与此同时，现有多模态数据集往往缺少一致的质量控制与结构化监督，导致数据”量大但难用”。要真正支撑接触密集型操作，需要的不只是更多帧，而是一套可扩展、可复用、且附带结构信息的采集与治理体系。
核心创新
TacClaw-Infinity 的关键在于采集接口与数据管线。它使用 TacClaw——一种触觉增强、UMI 风格的手持采集装置——同步记录视觉观测、指尖触觉信号与末端轨迹，并且采集时不需要目标机器人，从而把数据采集与具体本体解耦。数据来自遍布全球的分布式采集，覆盖家庭、实验室、工业场所、零售店与户外环境，并包含学术与工业合作者贡献的任务。围绕这批原始数据，团队搭建了可扩展的流水线，涵盖轨迹重建、多模态质量控制、本体感知过滤，以及结构化标注：以接触为中心的分割、子任务描述与空间定位。
结果
- 数据规模：超过 1 万小时、100 万条回合、10 亿帧，覆盖 1000 多种任务类型。
- 数据层面：评估了采集接口、整理后演示的动作空间兼容性，以及结构化标注的质量。
- 模型层面：在三台异构机器人上实现了跨本体迁移，且无需任何机器人专属演示。
局限
摘要侧重规模与流水线，未给出下游策略在这些数据上训练后的绝对性能上限，因此”数据究竟在多大程度上转化为更强的策略”仍待更细的量化。数据集虽宣称覆盖 1000 多种任务，但任务之间的难度、时长与接触复杂度分布未在摘要中说明，长时序、力敏感任务的占比仍是未知数。此外，UMI 风格接口的动作空间与不同机器人本体的对齐误差，会直接决定迁移质量，这一点在摘要中未被深入讨论。
产业启示
触觉长期被视为”有则更好、无则也行”的模态，而大规模、带结构化标注的触觉数据，正是让它从锦上添花变成可训练信号的前提。对行业而言，这类基础设施级数据集的价值在于降低每个团队的采集成本：无需为每台机器人重复采集，先用共享的手持接口攒数据，再靠跨本体迁移落到自家硬件上。当数据规模跨过百万回合量级，瓶颈将从”有没有数据”转向”如何做质控与标注”——而这正是这份工作顺带提供的另一半。