凤凰网科技讯 (编辑/宋淑美) 11月20日,WorkBuddy宣布上线电脑操控(Computer Use)能力,可识别桌面应用界面,并执行点击、输入和滚动等操作。即使目标软件没有API、连接器或网页版,用户也可通过自然语言指令,让其操作客户端完成查询、录入等任务。
打开网易新闻 查看精彩图片
据介绍,该功能可用于老旧业务系统及未开放接口的软件。例如,用户可以要求WorkBuddy在教务系统中查询记录,或在仓储、资产等多个客户端之间核对信息并填写表单。处理跨系统任务时,WorkBuddy可依据入库单号等关联信息,在不同应用间衔接操作流程。
打开网易新闻 查看精彩图片
任务执行过程中,用户可继续在其他应用中处理工作,并通过侧边画中画窗口查看实时进度。不过,用户不宜同时操作WorkBuddy正在控制的软件,以免因输入焦点或页面状态变化导致任务中断。
目前,电脑操控功能仍处于公测阶段,支持Windows和macOS系统,用户需要将WorkBuddy客户端升级至5.11.0及以上版本,并授予辅助功能、屏幕录制等系统权限。官方提示,界面识别效果可能因软件而异。
对于登录、授权、支付、提交及删除等敏感操作,WorkBuddy建议用户保持在场并实时核对。任务完成后,用户仍需返回原系统检查查询结果或录入内容,确认无误后再继续后续操作。
更多深度解读,请搜索「和讯小金鲤」小程序