2026-01-31 19:02:03
国家地方共建人形机器人创新中心(以下简称“国地中心”)日前联合上海纬钛科技有限公司(以下简称“纬钛机器人”)发布全球首个最大规模的跨本体视触觉(Vision-Based Tactile Sensor)多模态数据集:白虎-VTouch。该数据集包含视触觉传感器数据、RGB-D数据、关节位姿数据等,涵盖轮臂机器人(DWheel)、双足机器人(青龙)、手持智能终端等本体构型,数据集规模超60000分钟,第一批6000分钟开源数据已上线OpenLoong开源社区。
记者了解到,白虎-VTouch数据集首创跨本体视触觉多模态真实交互数据采集新范式,系统破解具身智能机器人在真实物理交互数据稀缺、高保真触觉信息不足、跨机器人本体泛化能力弱三大核心瓶颈,是目前全球规模最大、模态最完整、任务结构最系统化的视触觉多模态机器人操作数据集。
白虎-VTouch数据集补足了具身智能Scaling Law所缺失的“触觉与接触”维度,基于真实物理交互信息采集,填补了大规模真实视触觉交互数据的长期空白,为构建真正具备物理理解与精细操控能力的具身基础模型提供关键语料与工程底座,加速机器人从“能看”走向“能触、能控、能稳态泛化”的真实世界部署进程。
此外,白虎-VTouch数据集覆盖家居家政、工业制造、餐饮服务、特种作业等4大类真实场景、380+任务类型、100+原子技能、500+真实物品。白虎-VTouch数据集突破传统“单任务人工采集”的低效模式,提出“矩阵式”任务构建新范式,实现“数据规模化生成+能力结构化覆盖+泛化学习路径可控”的统一闭环,使机器人策略模型能够在精细触觉感知、闭环力控交互与复杂双臂协作等关键能力上实现系统性提升,而非依赖零散任务堆叠。
另据了解,白虎-VTouch数据集所采用的视触觉传感器支持最高640*480分辨率与120Hz刷新率,在物体接触过程可稳定记录细粒度接触变化,包含视触觉接触图像约9072万对真实物体接触样本。视触觉接触数据占本数据集规模的比重为57%,显著扩展了真实物理交互场景的接触范围。在任务层面,视触觉信息重点覆盖260+接触密集型任务,其中,68%的任务在引入视触觉感知后获得了更完整、连续的接触状态描述,为精细操作、力控调整与失败恢复等关键环节提供了直接增益,充分体现了视触觉数据在提升复杂操作任务成功率方面的实际价值。
基于白虎-VTouch数据集,未来国地中心将联合生态单位持续推进具身VTLA模型研究,深度绑定矩阵式任务设计、多层次语义标注与统一算法框架,充分释放数据集价值,构建从数据到决策、从理解到执行的完整具身智能生态,推动机器人在真实复杂场景中的能力跃迁。