| title | Computer Use |
|---|---|
| nav_title | Computer Use |
| description | 让 Claude 读屏幕、点鼠标、敲键盘,替你操作别的应用。 |
| order | 7 |
开了 Computer Use,Claude 就能截屏看你的屏幕、移动鼠标、点击、输入文字,去操作那些没有 API 的应用——系统设置、原生笔记、Finder、第三方桌面软件都行。
它直接作用于你这台电脑,所以开之前请先看清楚要授权什么。
支持 macOS 和 Windows。Linux 暂无执行器。
打开 设置 → Computer Use,页面顶部是一排环境检查:
- Python 3 — 需要本机装了 Python 3。没检测到时点「下载 Python 3」去装。装在 conda、pyenv 或其他自定义环境里的话,在「Python 解释器路径」里手动选可执行文件,之后会优先用它。
- 虚拟环境 和 依赖包 — 点「安装环境」,应用会自己建一个隔离的 venv 并装好平台依赖,不污染你的全局 Python。
- 全绿以后页面会显示「所有检查通过,Computer Use 已就绪」。
装完可以随时点「重新检测」核对状态。
macOS 上还需要两个系统权限,缺一个都用不了:
| 权限 | 用来干什么 |
|---|---|
| 辅助功能 | 移动鼠标、点击、输入文字 |
| 屏幕录制 | 截屏,也就是「让它看见」 |
页面上有「打开辅助功能设置」和「打开屏幕录制设置」两个按钮,直接跳到系统设置对应位置。
:::warning 授权之后必须完全退出并重新打开应用才会生效。macOS 只在进程启动时读一次权限,不重启的话页面上会一直显示未授权。 :::
授权时注意勾的是真正启动 Claude Code Haha 的那个 App。屏幕录制的自动检测偶尔不稳定,如果系统设置里明明已经勾上、页面却还显示未授权,通常直接用就行。
默认情况下,Claude 每次想控制一个新应用,都会先弹一个「Computer Use 想控制这些应用」的确认框,写清它要控制哪些应用、为什么。你可以「本次会话允许」或者「拒绝」。
如果某几个应用你反复都会同意,可以在设置页的「已授权应用」里预先勾上。勾了以后 Claude 控制它们就不再弹窗。搜索框可以按名字过滤已安装的应用。
另外两个开关是单独的,不会因为授权了某个应用就自动获得:
- 剪贴板访问 — 读写系统剪贴板。
- 系统快捷键 — 发送系统级组合键。
:::danger 预授权等于永久放行。密码管理器、银行 App、企业 IM 这类应用不要放进列表——让它每次都问你一次。 :::
新建一条会话,用自然语言说清目标和允许操作的应用。从简单、可撤销的任务起步:
截取当前屏幕并告诉我你看到了什么。
打开「备忘录」,新建一条标题为「测试」的空白笔记。
帮我在系统设置里找到「显示器」那一页,但什么都不要改。
Claude 的工作方式是「截图 → 判断 → 操作 → 再截图」,所以它会比人慢,也会偶尔点错。给它明确的边界(「只在 X 应用里操作」「不要保存」)比给它一个笼统目标更靠谱。
同一时间只能有一条会话控制鼠标键盘。看到「正在被其他会话使用」时,先停掉或跑完那条会话。
- 没有全局中止热键。 想停下来就点会话里的停止按钮(
⌘.)。 - Windows 截图不过滤窗口。 macOS 的截图只保留已授权应用和桌面,Windows 上所有可见窗口都会进画面。开始前请关掉或最小化含敏感信息的窗口。
- 浏览器和终端里的操作受限。 浏览器只允许读(能看见但不能点),终端和 IDE 只允许点击(不能输入)。要操作网页请用浏览器扩展,要跑命令请让它用 Bash 工具。
- UI 变了要重新截图。 页面变化之后不能沿用旧坐标。
页面一直提示缺少权限 确认授权的是实际启动应用的那个 App,完全退出后重开,再点「重新检测」。
环境装不上
在「Python 解释器路径」里明确选一个 Python 3,确认它支持 venv,重新点「安装环境」。还不行就去 设置 → 诊断 看安装日志。
能截图但点不动 确认目标应用在已授权列表里,并且它现在是前台窗口。浏览器和终端类应用受上面说的分级限制。
想了解权限分级、Python 桥接和执行器的实现,看Computer Use 架构。
