AI 热点

Gemini Mac 应用新增 computer use,可操控桌面应用与网页

9to5Google更新于 11月20日 03:39

Gemini app for Mac adds computer use to control desktop apps

AI 导读

Google 为 Gemini Mac 应用新增 computer use,使其能代用户在本地桌面应用和网页中点击、输入并完成多步骤任务。用户可在提示词中加入 @Computer use,批量处理图片、填写表单、制作演示文稿或准备商品上架;Connectors 中还新增 Blender 和 Autodesk Fusion 等 Desktop 应用。

推荐理由

精选AI 评分 85

从操作方式到具体案例,材料展示了 Gemini 如何跨桌面应用与网页处理多步骤任务,减少手工切换与录入。

主题

标签

正文 · AI 翻译

Google 正在升级 Mac 版 Gemini 应用,为其加入 computer use 功能,使其能够跨本地桌面应用和网页执行操作。

Mac 应用中现有的 Task(此前名为 Gemini Spark)功能只能通过 Connected Apps 访问本地文件,例如 @Gmail 或 @Google Calendar。

借助 computer use,Mac 版 Gemini 可以代你点击和输入,在本地桌面应用及网页中完成多步骤任务,例如浏览菜单和填写表单。

许多日常任务横跨彼此不互通的桌面应用和网站。computer use 会在后台处理繁琐步骤,既节省你的时间,又不占用你的屏幕或光标。

示例使用场景包括:

加快创意工作流程:在你常用的设计软件中批量为照片调色,或搭建复杂的 3D 场景。

省去手动填写表单:从本地 PDF 中提取重量、尺寸和地址,填写包含多个输入框的运费报价表。

将实时数据转化为可直接演示的幻灯片:从多个地区的实时仪表板中提取指标和屏幕截图,并在 Google Slides 中制作演示文稿。

批量发布待售商品:分析本地文件夹中的服装照片、研究定价、记录商品详情,并在二手交易平台上准备好商品信息以供发布。

使用时,请在提示词中加入 @Computer use。在 Customize > Connectors 中,你会看到 Blender 和 Autodesk Fusion 等新的“Desktop”应用,与现有的 Git 和 Obsidian 集成并列。

来源

9to5Google