先了解这件事
AI 综述
2026年8月25日,Google发布XR手势交互原型AgentHands。据Google Research介绍,该原型由LLM驱动,为XR空间中的对话智能体配上与语音同步的表达性手势,把抽象指令转化为贴合用户物理空间的动作演示,相关论文发表于CHI 2026。系统通过眼动与场景重建把兰花、笔记本等物体注册进3D边界框,LLM在回复中内联GestureEvents,头显本地解析器用词级时间戳让手势与TTS精确同步。在N=12的被试内研究中,AgentHands与纯语音基线对比,验证了XR与共语手势结合在兰花养护和3D打印机操作任务中的效果。目前尚无后续发展事实。
AI 根据公开报道生成
最新进展 · 正式报道
AgentHands:为 XR 空间对话智能体生成同步交互手势事件进展
1 个已确认进展
- 来源:Google Research
报道与讨论时间线
按时间查看正式报道与传播讨论;两类内容的证据等级保持独立。
8月26日
Google Research一手
AgentHands:为 XR 空间对话智能体生成同步交互手势
Google Research 发布 LLM 驱动的 XR 原型 AgentHands,为对话智能体配上与语音同步的表达性手势,把抽象指令变成贴合用户物理空间的动作演示,论文发表于 CHI 2026。系统通过眼动与场景重建把兰花、笔记本等物体注册进 3D 边界框,LLM 在回复中内联 GestureEvents,头显本地解析器用词级时间戳让手势与 TTS 精确同步。在 N=12 的被试内研究中,AgentHands 与纯语音基线对比,验证了 XR 与共语手势结合在兰花养护和 3D 打印机操作任务中的效果。