AI 编程 · 进阶概念
计算机使用
Computer Use
也叫:浏览器操控、GUI Agent、桌面操控、Browser Use
让 AI 像人一样查看屏幕、移动指针、点击和输入,从而操作浏览器或桌面应用完成任务。
详细解释
计算机使用(有时也叫 GUI Agent)把「看界面 + 点按」变成工具:模型根据截图或无障碍树决定下一步点击哪里、输入什么。它适合没有稳定 API 的后台、第三方网站流程、或端到端验收。
代价是慢、贵、不稳:布局一变就点错;还可能点到付款、删除。必须配合人工确认、沙箱账号和操作白名单。和工具调用/MCP 相比,能调 API 时优先 API,GUI 是兜底。
对 Vibe Coding:用它做「按说明走一遍注册流程并截图」,比让它在生产站乱点更合适。
开发者信息术语 ID、DOM 线索、识别优先级
- 术语 ID
ai-computer-use- DOM 选择器
- 没有 DOM 线索,这个概念不在页面上直接识别。
- 优先级
- 1 · 同一层有多条命中时,优先级高的胜出
- 版本
- v1 · 更新于 2026/10/22