AI News

德国团队提出RUMI机器人示教系统,融合AR实时反馈与触觉交互

VR陀螺更新于 11月16日 20:52

德国研究团队提出RUMI机器人示教系统,融合AR实时反馈与触觉交互技术

AI 导读

德国纽伦堡工业大学、慕尼黑工业大学与西门子联合团队提出RUMI机器人示教系统,融合VR头显追踪、AR实时反馈与触觉交互,采用与Robotiq 2F-85夹爪匹配的手持接口和可更换指尖传感器。实验显示,加入实时机器人可视化与姿态初始化后,50次操作中关节限位违规回合数从16次降至3次。

正文

编译/VR陀螺

近日,德国纽伦堡工业大学、慕尼黑工业大学及西门子联合研究团队在arXiv平台发表题为《RUMI: A Robotiq-Matched Universal Manipulation Interface for Robot Learning with Augmented Reality and Haptic Feedback》的论文,提出一种融合VR头显追踪、AR实时反馈及触觉交互的机器人操作数据采集系统RUMI,旨在提高机器人示教过程中的动作可行性,并支持力觉数据采集。

据了解,机器人执行抓取、搬运等操作时,需要精确控制与物体接触的作用力,但目前具备力觉信息的大规模机器人训练数据仍较为有限。现有手持式示教设备虽然能够采集操作过程中的受力信息,但多数针对简单的线性夹爪设计,难以匹配实际机器人夹爪的复杂运动结构。

RUMI采用与Robotiq 2F-85机器人夹爪相匹配的手持式操作接口,并配备可更换的指尖传感器。 该设计能够保留目标夹爪的运动几何特征,同时支持接触前的自然操作输入与接触后的力觉测量。

系统将追踪功能集成至VR头显,通过AR方式实时显示目标机器人的姿态及运动状态,帮助操作者判断当前动作是否符合机器人的运动学约束。此外,RUMI还引入触觉反馈机制,支持在模拟及真实机器人环境中开展具备力觉信息的遥操作。

实验结果显示,在加入实时机器人可视化与姿态初始化功能后,50次操作中出现关节限位违规的回合数由16次下降至3次。 研究团队还利用两种不同指尖传感方式采集示教数据,用于训练机器人模仿学习策略,并在仿真环境中评估触觉接口采集力觉数据的能力。

此次研究展示了XR设备在机器人学习中的另一种应用方式,即通过AR可视化与触觉交互辅助机器人示教,为具身智能训练数据采集提供新的技术方案。

来源:arXiv

投稿/爆料:tougao@youxituoluo.com

稿件/商务合作: 林南(微信 19250561593)

加入行业交流群:林南(微信 19250561593)

版权申明:本文为VR陀螺原创,任何第三方未经授权不得转载。如需转载请联系微信:vrtuoluo233 申请授权,并在转载时保留转载来源、作者以及原文链接信息,不得擅自更改内容,违规转载法律必究。文中有图片、视频素材来自互联网或无法核实出处,如涉及版权问题,请联系本网站协商处理。

数字科技产业资讯与服务平台

下载「陀螺科技」APP,获取前沿深度数字科技产业讯息

来源

VR陀螺