谷歌当地时间11月19日宣布,为macOS版Gemini应用推出名为“电脑操控”(Computer Use)的新功能。该功能允许AI直接操作Mac上的桌面应用、访问本地文件并浏览网页,独立完成多步骤任务。目前,这一功能面向美国地区的英语用户逐步开放。
用自然语言下达跨应用任务
用户只需用自然语言描述任务,Gemini就能在不同应用之间切换,执行点击、输入文字、填写表单和操作菜单等动作。谷歌列举的应用场景包括批量处理照片、从本地PDF文件提取信息并填写在线表单、根据实时数据制作演示文稿,以及整理商品信息后在二手交易平台上架销售。
后台窗口运行,关键操作先确认
执行任务时,Gemini会在独立的后台窗口中运行,不占用用户当前的主屏幕和鼠标光标。聊天界面内会显示实时操作预览,用户可以随时查看AI的执行过程,并暂停或停止任务。对于关键操作,Gemini会要求用户事先确认,以降低误操作风险。
权限限定到具体应用
权限管理方面,用户可以自行选择允许Gemini访问的应用程序,而不是直接向AI开放整台电脑的操作权限。AI能够执行操作的范围,与用户授予的应用权限保持一致。
硬件、系统与订阅均有门槛
谷歌表示,使用该功能需要搭载Apple Silicon芯片、运行macOS Sequoia 15.0或更新版本的Mac;用户还需年满18岁,使用符合条件的个人Google账号,并订阅Google AI Plus、Pro或Ultra服务。
与macOS权限机制调整同步受关注
谷歌推出这项功能的时间,恰逢苹果调整macOS的应用权限管理机制。苹果11月16日发布开发者公告称,macOS 27.3 Beta 2已引入针对设备控制、数据访问和完全磁盘访问权限(Full Disk Access)的调整。
新系统将原有的设备控制与数据访问设置拆分为不同权限选项,允许用户指定应用可以控制的具体程序,或限定其能够访问的文件夹,并提供每次请求权限时都需要用户确认的选项。苹果还增加透明度提示:当某个应用通过相关权限控制其他应用时,系统会在菜单栏显示提示标识。
苹果表示,授予应用完全磁盘访问权限可能使Mac上的各类数据面临风险,因此希望通过更细致的权限设置,让用户清楚了解应用能够访问和控制的内容。苹果此次权限调整与AI智能体日益普及带来的安全风险相关,但调整时间早于谷歌发布Gemini电脑操控功能,并非针对这款应用临时作出回应。
