腾讯 WorkBuddy 公测电脑操控能力:可识别界面并直接操作电脑,无需软件开放接口

4小时前 小马良
3 0

腾讯 WorkBuddy 新增 Computer Use 电脑操控能力,现已开启公测。该功能能够识别电脑当前页面、理解客户端界面,自主完成点击、文字输入、页面滚动等操作,不需要目标软件提供专属接口即可在后台执行任务。

腾讯 WorkBuddy 公测电脑操控能力:可识别界面并直接操作电脑,无需软件开放接口

这项能力同时支持 macOS 与 Windows 平台,需要将 WorkBuddy 客户端升级到 5.11.0 或更高版本,手动开启功能并完成系统授权后使用。官方也提示,不同软件的界面识别效果存在差异。

使用方式比较直观,用户直接在对话框用自然语言描述任务,WorkBuddy 会根据意图自动调用对应的电脑操作;侧边悬浮小窗可以实时查看任务执行进度。针对登录、授权、支付、提交、删除这类高风险敏感操作,官方建议用户保持在场、全程监督。任务执行完毕后,WorkBuddy 会返回执行结果报告。