【免费下载链接】ghost-os
Full computer-use for AI agents. Self-learning workflows. Native macOS. No screenshots required.
Ghost OS 是一款原生 macOS 的开源 AI 计算机操控(Computer-Use)工具,通过 MCP 协议让任何 AI Agent「看见并操作」你 Mac 上的所有应用——发 Gmail、建 Finder 文件夹、发 Slack 消息。本教程面向新手,带你 5 分钟完成 Ghost OS 的安装与首次体验,全程本地运行,数据不出电脑。
什么是 Ghost OS:AI 计算机操控为什么需要它
其他 Computer-Use 工具靠截图「猜」屏幕内容,Ghost OS 直接读取 macOS 辅助功能树(Accessibility Tree),拿到每个元素的名称、角色、坐标等结构化数据;AX 树不够用时(如网页应用),再回退到本地视觉模型 ShowUI-2B 做视觉定位。
- 🪟任意应用:不只有浏览器,Slack、Finder、Messages 等本机 App 都能操控
- 📦自学习:AI 把一个工作流跑通一次,保存为 JSON 配方(Recipe),以后反复执行
- 🧠29 个工具:点击、输入、滚动、按键、窗口管理、等待条件等,定义见 Sources/GhostOS/MCP/MCPTools.swift
- 🔒本地优先:截图和视觉模型都在本机推理,数据永不离开电脑
macOS AI 计算机操控工具安装:2 步一键完成
第 1 步:Homebrew 安装 Ghost OS
打开「终端」App,执行:
brew install ghostwright/ghost-os/ghost-os第 2 步:运行安装向导 ghost setup
ghost setup就这两行命令。ghost setup 向导 会交互式完成全部初始化:
- 辅助功能权限(必需)——向导会自动帮你打开系统设置的正确面板
- 屏幕录制权限(可选)——启用截图能力
- 输入监控权限(可选)——自学习模式需要
- MCP 配置——自动把 Ghost OS 接入 Claude Code、Cursor 等 MCP 客户端
- 安装内置配方——如 Gmail 发邮件、arXiv 下载论文
- 视觉模型设置——自动下载 3.0 GB 的 ShowUI-2B 本地模型
备选:从源码编译安装
Homebrew 安装失败时(macOS 开发者测试版上较常见),可以克隆仓库自己编译,需要 Swift 6.2+ 和 macOS 14+:
git clone https://gitcode.com/gh_mirrors/gh/ghost-os cd ghost-os swift build .build/debug/ghost setup验证 Ghost OS 是否装好:10 秒体检
安装完成后,运行健康检查命令:
ghost doctorDoctor 诊断工具 会逐项检查:辅助功能/屏幕录制/输入监控权限、MCP 配置、已装配方数量、各应用 AX 树可读性、视觉模型状态。全部显示[ok]并输出 "Ghost OS is healthy" 即安装成功;有问题也会附带修复建议。
AI 计算机操控首次体验:一句话发一封邮件
装好后,直接对 AI Agent 用自然语言下指令即可:
你: "给 sarah@company.com 发一封关于 Q4 报告的邮件" Agent: ghost_run recipe:"gmail-send" params:{recipient, subject, body} → 打开撰写窗口、填好收件人/主题/正文、发送。完成。内置配方覆盖常见场景:gmail-send.json(发邮件)、arxiv-download.json(下载论文)、slack-send.json(Slack 消息)、finder-create-folder.json(Finder 建文件夹)。配方是纯 JSON,运行前可以读、可审计、无黑箱,也方便分享给同事复用。
超越浏览器:操控 Slack 和 Finder 等原生应用
Ghost OS 的操作对象不限于网页——Slack、Finder 等原生 macOS 应用同样支持:
- 发送 Slack 消息
- 在 Finder 中创建文件夹、管理文件
- 读取和操作 Messages
自学习模式:演示一次,AI 永远记住
v2.2 最亮眼的升级是自学习配方:你手动演示一次操作,Ghost OS 通过事件监听记录每个动作,再由 AI 合成参数化配方。
ghost_learn_start:开始观察你执行任务ghost_learn_stop:停止并返回带上下文的操作序列ghost_learn_status:查看录制进度
例如你说「看我怎么发这封邮件」,Agent 开始录制;你操作完,AI 会把它提炼成含收件人、主题、正文 3 个参数的配方存下来。下次只需一句话即可复现,无需重新推理。
常见问题 FAQ
Q:需要 macOS 什么版本?macOS 14 及以上,Apple Silicon 与 Intel 均可。
Q:支持哪些 AI 客户端?任何支持 MCP 协议的工具:Claude Code、Cursor、VS Code 等,ghost setup会自动写好配置。
Q:数据安全吗?Ghost OS 与视觉模型 ShowUI-2B 均本地运行,屏幕内容不上传。
Q:出问题怎么排查?先跑ghost doctor,输出对每项都有修复建议;完整工具使用规范见 GHOST-MCP.md。
总结
5 步让 AI 接管你的 Mac:brew install→ghost setup→ 授权 →ghost doctor→ 对 Agent 开口。装好后不妨从一句「帮我发封邮件」开始,体验 AI 计算机操控的真实威力;也可以把自己的工作流写进 recipes/ 目录,让 Ghost OS 越用越聪明。
【免费下载链接】ghost-os
Full computer-use for AI agents. Self-learning workflows. Native macOS. No screenshots required.
相关推荐
如何快速上手Clockwork:5分钟安装配置教程
如何快速上手Clockwork:5分钟安装配置教程 Clockwork是一个强大的PHP开发工具,让你能够在浏览器中直接调试和分析PHP应用性能。作为一款专业的
开发工具可观测性如何用UpSnap实现远程唤醒计算机:5分钟快速上手教程
如何用UpSnap实现远程唤醒计算机:5分钟快速上手教程 UpSnap是一款简单易用的远程唤醒计算机工具,基于SvelteKit、Go和PocketBase构建
后端前端网络如何快速上手 golangci-lint:5 分钟安装配置教程
如何快速上手 golangci lint:5 分钟安装配置教程 golangci lint 是 Go 语言生态中最受欢迎的快速 linters 运行器,它能够并
开发工具代码质量Lint静态分析
创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考