PokeBot 推出 RoboAPI，用 API 调用 Poke-Aurora 控制机械臂
The call-a-model pattern that made LLMs easy to build on is reaching physical robots.
PokeBot 推出 RoboAPI，由世界动作模型 Poke-Aurora 驱动，支持 5 款兼容机械臂通过自然语言指令执行任务，无需针对每项任务单独采集数据训练。其工作方式类似文本 LLM API：机械臂摄像头图像上传到 PokeBot 服务器，Poke-Aurora 返回动作，机械臂以 30Hz 执行。Rohan Paul 认为这是迈向零样本机器人（zero-shot robotics）的进展，任务之间只需改变指令。
查看原帖别轻信演示。自己动手试试。 隆重推出 RoboAPI，由我们的世界动作模型 Poke-Aurora 驱动。 通过简单的 API 向兼容机器人下达自然语言指令。无需针对特定任务进行训练。 更多信息：https://t.co/BHzTOo4I8u https://t.co/3AVNh040Vf
查看原文
Don't trust demos. Try it yourself. Introducing RoboAPI, powered by Poke-Aurora, our world-action model. Give compatible robots natural-language instructions through a simple API. No task-specific training. More information: https://t.co/BHzTOo4I8u https://t.co/3AVNh040Vf
正文 · AI 翻译
让大语言模型易于构建的“调用模型”模式，如今正延伸到实体机器人上。
> 在此之前，要让机器人模型在你自己的机械臂上运行，意味着需要为每项任务采集数据并进行训练。PokeBot 的 RoboAPI 让 5 款受支持机械臂的拥有者跳过这一过程，转而发送文本指令。
> 这是一个面向机械臂的 API，很像面向文本的 LLM API：机械臂的摄像头图像发送到 PokeBot 的服务器，Poke-Aurora 返回动作，机械臂以 30Hz 执行。
这是迈向零样本机器人（zero-shot robotics）的一大进步，任务之间唯一变化的就是指令。
https://t.co/7JnuCiJ59p