Gemini Mac 应用新增 computer use,可操控桌面应用与网页
Gemini app for Mac adds computer use to control desktop apps
Google 为 Gemini Mac 应用新增 computer use,使其能代用户在本地桌面应用和网页中点击、输入并完成多步骤任务。用户可在提示词中加入 @Computer use,批量处理图片、填写表单、制作演示文稿或准备商品上架;Connectors 中还新增 Blender 和 Autodesk Fusion 等 Desktop 应用。
推荐理由
精选AI 评分 85
从操作方式到具体案例,材料展示了 Gemini 如何跨桌面应用与网页处理多步骤任务,减少手工切换与录入。
主题
正文 · AI 翻译
Google 正在升级 Mac 版 Gemini 应用,为其加入 computer use 功能,使其能够跨本地桌面应用和网页执行操作。
Mac 应用中现有的 Task(此前名为 Gemini Spark)功能只能通过 Connected Apps 访问本地文件,例如 @Gmail 或 @Google Calendar。
借助 computer use,Mac 版 Gemini 可以代你点击和输入,在本地桌面应用及网页中完成多步骤任务,例如浏览菜单和填写表单。
许多日常任务横跨彼此不互通的桌面应用和网站。computer use 会在后台处理繁琐步骤,既节省你的时间,又不占用你的屏幕或光标。
示例使用场景包括:
加快创意工作流程:在你常用的设计软件中批量为照片调色,或搭建复杂的 3D 场景。
省去手动填写表单:从本地 PDF 中提取重量、尺寸和地址,填写包含多个输入框的运费报价表。
将实时数据转化为可直接演示的幻灯片:从多个地区的实时仪表板中提取指标和屏幕截图,并在 Google Slides 中制作演示文稿。
批量发布待售商品:分析本地文件夹中的服装照片、研究定价、记录商品详情,并在二手交易平台上准备好商品信息以供发布。
使用时,请在提示词中加入 @Computer use。在 Customize > Connectors 中,你会看到 Blender 和 Autodesk Fusion 等新的“Desktop”应用,与现有的 Git 和 Obsidian 集成并列。
AI 热点