搜「AI 操控電腦」,你會同時看到三個名字:Claude Code、OpenAI Computer Use、以及社群裡常說的 Computer 專案(computer-use-mcp)。它們都能讓 AI 像人一樣點按鈕、填表單、操作應用——但很多人把它們當成同一件事,選型時就會踩坑。
本文用一張關係圖 + 對比表,把三者的分層、邊界和選型路徑說清楚。
一句話關係圖
| 名稱 | 它是什麼 | 誰在用 |
|---|---|---|
| Claude Code | Anthropic 的終端編程 Agent(產品) | 開發者在本地終端寫程式、跑命令 |
| OpenAI Computer Use | OpenAI 的 API 級 GUI 操控能力(CUA 模型 + computer 工具) |
開發者自建 harness,或 ChatGPT Operator 使用者 |
| Computer 專案 | GitHub 上的 computer-use-mcp 開源生態(MCP 伺服器) |
任何支援 MCP 的 Agent:Cursor、Cline、Codex CLI… |
關係總結:三者解決同一個問題——「AI 如何操作電腦介面」——但處在不同層:
- Claude Code 消費 computer use(內建
computer-useMCP) - OpenAI Computer Use 提供 computer use(API 原語 + Operator 產品)
- Computer 專案 標準化 computer use(開放 MCP,不綁單一廠商)
computer-use 的內建 MCP 伺服器;GitHub 上也有叫 computer-use-mcp 的開源倉庫——名字相似,不是同一個專案。前者是 Anthropic 官方整合,後者是社群實現的開放協議伺服器。
Claude Code:終端 Agent + 內建桌面操控
Claude Code 是 Anthropic 推出的命令列編程 Agent:在本地終端執行,能讀倉庫、執行 shell、改檔案、調 MCP 工具。2025–2026 年它進一步整合了 Computer Use——讓 Claude 不只會寫程式,還能開啟 macOS 應用、點擊介面、輸入文字、看螢幕。
內建 computer-use MCP
在 Claude Code 互動會話中執行 /mcp,找到 computer-use 並啟用。首次使用需授予 macOS 兩項權限:輔助功能與螢幕錄製。
關鍵限制(2026 年 8 月)
| 限制項 | 說明 |
|---|---|
| 平台 | 研究預覽,主要面向 macOS |
| 套餐 | Pro / Max 個人版 |
| 模式 | 僅互動式會話 |
| 安全 | 無沙箱,直接操作真實桌面 |
更多 Agent 工作流配置可參考 Claude Code Skills 模板大全。
OpenAI Computer Use:API 原語 + Operator 產品
OpenAI Computer Use(CUA)是 OpenAI 的 GUI 操控能力:模型看截圖,返回結構化動作,由你的程式執行,再把新截圖餵回模型。
面向使用者有 Operator;面向開發者有 Responses API computer 工具 與 openai/openai-cua-sample-app 範例倉庫。
OpenAI Codex 的瀏覽器能力以搜尋/讀文件為主,不等同於完整 Computer Use GUI 操控。
Computer 專案:MCP 開源生態
「Computer 專案」 通常指 GitHub 上以 computer-use-mcp 為關鍵字的開源 MCP 伺服器家族——讓任意 Agent 都能呼叫桌面工具。
代表性專案包括 minghinmatthewlam/computer-use-mcp(macOS 後台安全輸入)、kanishka089/computer-use-mcp(realhands)、syedazharmbnr1/computer-use-mcp(33 工具)等。
選型決策樹
- macOS 個人開發 → Claude Code + 內建 computer-use
- 跨平台 SaaS 產品 → OpenAI Computer Use API + Playwright
- 多 Agent 共用 → 部署 computer-use-mcp
- 純 Web CI → Playwright,不必像素級 Computer Use
如果你在對比 Cursor 與 Claude Code,建議結合 Cursor 替代工具橫評 一起看。入門 Agent 體系可參考 AI Agent 學習路線 2026。
macOS 是 Computer Use 的主戰場
無論走內建路線還是開源 MCP,macOS 都是目前體驗最完整的平台。若需要在雲端獲得完整 macOS 桌面來跑 Computer Use,Kvmzen Mac 雲租用 提供獨享 Mac mini M4,與 Claude Code、computer-use-mcp 均可配合。
