先了解这件事
2026年11月4日,公众号“卡尔的AI沃茨”发布实测文章,分享用Grok Bot搭配Vercel开源的agent-desktop控制本机其他Agent和应用的方法。文章称,agent-desktop通过CGEvent注入模拟真实鼠标键盘事件,可操控本机其他Agent和剪映完成AI剪辑;对比amontlabs的LCU方案,LCU走macOS accessibility API,能识别按钮和输入框,但剪映这类Electron自绘UI的时间线拖拽区域对accessibility API几乎不可见,agent-desktop用800ms慢速拖动即可完成。文章还称agent-desktop本身只是CLI工具、不做推理,写成脚本回放时零额度消耗,同样剪辑任务第一次13分钟、第二次37秒,LCU平均4到5分钟;缺点是需占用窗口,建议配mac mini。
AI 根据公开报道生成
最新进展 · 正式报道
用 Grok Bot 搭配 Vercel 开源 agent-desktop 控制本机应用事件进展
1 个已确认进展
- 来源:卡尔的 AI 沃茨
报道与讨论时间线
按时间查看正式报道与传播讨论;两类内容的证据等级保持独立。
11月4日
卡尔的 AI 沃茨
用 Grok Bot 搭配 Vercel 开源 agent-desktop 控制本机应用
作者实测用 Grok Bot 搭配 Vercel 开源的 agent-desktop,通过 CGEvent 注入模拟真实鼠标键盘事件,可操控本机其他 Agent 和剪映完成 AI 剪辑。他对比了 amontlabs 的 LCU 方案:LCU 走 macOS accessibility API,能识别按钮和输入框,但剪映这类 Electron 自绘 UI 的时间线拖拽区域对 accessibility API 几乎不可见;agent-desktop 用 800ms 慢速拖动即可完成。agent-desktop 本身只是 CLI 工具、不做推理,写成脚本回放时零额度消耗,同样剪辑任务第一次 13 分钟、第二次 37 秒,LCU 平均 4 到 5 分钟;缺点是需占用窗口,作者建议配 mac mini。