←新闻详情

Robbyant 蚂蚁灵波更新于 10月11日 13:01

蚂蚁灵波 Zero-WAM:机器人从人类视频学新任务

Can robots learn new tasks directly from human‑operation videos?✅

AI 导读

机器人能直接从人类操作视频中学习新任务吗?✅ 认识 Zero-WAM:面向机器人学的基于视频的上下文学习。无需大量重训练,无需冗长文本指令。给定人类演示视频,它能推断物体、交互与任务流程,生成机器人可执行的动作。 - HumanGen 数据集:8.6K 任务 / 74.2K 人-机器人样本 - IFP 训练用于长时程视频任务理解 - 在 7 个未见过的 RoboTwin 2.0 任务上平均成功率 46.95% 论文已发布,代码即将开源。

正文

当前显示原文,中文全文译文尚未就绪。

Can robots learn new tasks directly from human‑operation videos?✅

Meet Zero‑WAM: video‑based in‑context learning for robotics. No heavy retraining, no verbose text instructions. Given human demo videos, it infers objects, interactions & task flows to generate robot‑executable motions. - HumanGen dataset: 8.6K tasks / 74.2K human‑robot samples - IFP training for long‑range video task understanding - 46.95% avg success rate on 7 unseen RoboTwin 2.0 tasks

来源

Robbyant 蚂蚁灵波