您的位置首页 >科技要闻 >

腾讯WorkBuddy,上线电脑操控能力

腾讯 WorkBuddy 正式推出电脑操控 Computer Use 能力,目前处于公测阶段,它可以自动识别电脑上的软件界面、看懂窗口内容,自主完成点击、文字输入、页面滚动等操作,最大亮点是不用目标软件开放接口、不用对接连接器,就连一些老旧无 API 的客户端也能自动操作,适合表单填报、跨系统数据查询、批量操作这类重复性办公任务,和以往靠插件、API 调用的 AI 办公工具区别很大。之前 WorkBuddy 的能力大多集中在文档处理、联网检索、调用已经开放接口的办公软件,很多企业内部自研系统、老业务系统没有开放 API,AI 就没法自动操作;这次新增的电脑操控能力走界面识别路线,靠截图 + 视觉理解的方式直接操作桌面程序,打通了大量封闭业务系统的自动化卡点。下面把适配条件、核心能力、适用场景、开启步骤整理清楚。

电脑操控能力基础信息清单

  • 版本要求:WorkBuddy 客户端更新至 5.11.0 及以上版本
  • 支持系统:Windows、macOS
  • 阶段状态:公测体验版
  • 权限要求:需要授权屏幕读取、界面控制权限,执行过程会截屏识别窗口
  • 限制:界面识别效果受软件 UI 样式、窗口缩放、主题影响,部分特殊界面识别不稳定
  • 监控方式:支持画中画小窗实时查看操作过程,随时手动叫停任务

电脑操控可以做的典型办公任务

  • 表单自动填报:在企业内部管理系统、资产管理系统录入信息、勾选选项、提交单据
  • 跨系统数据核对:先在 A 系统查询数据,自动切换窗口,在 B 系统填入信息完成核对登记
  • 网页 / 客户端批量查询:批量检索台账、导出报表、翻页抓取页面信息
  • 常规窗口操作:打开软件、切换标签、滚动页面、输入文本、点击按钮

电脑操控能力对比(API 调用 VS 界面视觉操控)

模式前提条件可操作范围稳定性
API / 连接器调用软件必须开放接口主流互联网、腾讯生态软件稳定,识别不受界面样式影响
本次电脑视觉操控不需要开放 API任意桌面客户端、老旧自研系统、封闭内网系统受 UI、缩放、弹窗影响,公测阶段有波动

开启电脑操控能力的操作步骤

  1. 升级 WorkBuddy 桌面客户端到 5.11.0 或者更高版本
  2. 进入设置页面,找到电脑操控(Computer Use)开关,打开功能,完成系统权限授权
  3. 用自然语言描述完整任务,写明要操作的软件、操作目标、判断规则
  4. 启动任务,打开画中画窗口,实时观察 AI 操作流程,发现操作错误随时点击停止
  5. 任务结束后查看完整操作日志,确认数据填写、导出结果是否正确

整体来看,腾讯 WorkBuddy 这次上线电脑操控能力,补齐了封闭业务系统自动化短板,对企业行政、财务、运维这类大量重复填表、跨系统对账的岗位帮助很大,但属于公测功能,识别精度还在持续优化,不适合直接用于高风险、高敏感的核心业务,建议人工复核结果。

【相关 FAQ】

问题 1:腾讯 WorkBuddy 上线电脑操控能力,是不是必须软件开放 API 接口才能操作?

回答 1:腾讯 WorkBuddy 上线电脑操控能力,不需要目标软件开放 API 接口,依靠界面识别,就可以直接操作大部分桌面客户端,包括老旧自研系统。

问题 2:腾讯 WorkBuddy 电脑操控能力,现在支持哪些系统,需要什么版本?

回答 2:腾讯 WorkBuddy 电脑操控能力支持 Windows 和 macOS 系统,客户端需要升级到 5.11.0 及以上版本,功能目前处于公测阶段。

问题 3:腾讯 WorkBuddy 电脑操控能力,执行的时候能不能看到操作过程,能不能随时停止?

回答 3:腾讯 WorkBuddy 电脑操控能力支持画中画小窗实时查看操作过程,一旦操作出错,用户可以随时手动叫停任务。

问题 4:腾讯 WorkBuddy 电脑操控能力,所有软件界面都能稳定识别吗?

回答 4:不是,腾讯 WorkBuddy 电脑操控依靠视觉识别界面,识别效果受 UI 样式、窗口缩放、弹窗干扰影响,部分特殊界面识别不稳定,属于公测功能。

【参考资料】

[2026-11-20](腾讯 WorkBuddy 上线电脑操控能力)财联社

[2026-11-20](腾讯 WorkBuddy 推出 Computer Use,无需 API 操控桌面应用)快科技

[2026-11-20](腾讯 WorkBuddy 上线电脑操控能力,公测支持 Windows、macOS)IT 之家

[2026-11-20](WorkBuddy 新增电脑操控能力,封闭业务系统自动化方案)新浪财经

【免责声明】

本文内容基于腾讯 WorkBuddy 官方公告、行业媒体公开资讯整理,腾讯 WorkBuddy 电脑操控能力尚处于公测阶段,识别效果、权限规则、功能范围后续还会迭代调整;该能力会读取屏幕画面,涉及企业内网、敏感数据操作时务必做好权限管控,任务结果建议人工复核,本文信息仅作为办公功能科普参考,不构成企业自动化项目落地建议。

今日大家都在搜的词: