toolin.ai logo
toolin.ai
首页
AI工具
AI技能包
AI资讯
精选推文
AI提示词
提交AI工具提交
toolin.ai logo
toolin.ai

百万AI玩家的创作利器库,发现最佳AI工具组合,提升您的创作效率

AI工具1,087个
技能包11个
产品功能
  • AI工具
  • AI技能包
  • AI资讯
  • 精选推文
关于我们
  • 关于Toolin
  • 联系我们
  • 合作洽谈
  • 更新日志
关注我们
© 2025 toolin.ai. All rights reserved.
服务条款隐私政策

OpenClaw Peekaboo v3:给 Mac Agent 装上眼睛和手

2026/05/12
·toolin小编

Peekaboo v3 让 AI Agent 能像素级截屏、读取 UI 元素、操控鼠标键盘,并打包为 MCP 服务供 Cursor 等工具直接调用。

OpenClaw Peekaboo v3:给 Mac Agent 装上眼睛和手
OpenClaw Peekaboo v3:给 Mac Agent 装上眼睛和手
2026/05/12

OpenClaw Peekaboo v3:给 Mac Agent 装上眼睛和手

Peekaboo v3 让 AI Agent 能像素级截屏、读取 UI 元素、操控鼠标键盘,并打包为 MCP 服务供 Cursor 等工具直接调用。

Peekaboo 是什么核心能力拆解"看"的能力"动"的能力MCP 打包自然语言模式实际使用案例适合的使用场景获取方式
AI产品

OpenClaw 的 Peekaboo 更新到 v3,给 Mac 上的 AI Agent 补上了最缺的两个能力:看屏幕和操作鼠标键盘。在此之前,Agent 能打开网页、跑流程,但涉及精确的 UI 操作就卡住了。Peekaboo v3 把这堵墙拆了。

适合在 Mac 上用 Agent 做自动化操作的开发者和效率工具爱好者。

Peekaboo 是什么

Peekaboo(直译"躲猫猫")是一个 Mac 上的工具包,让 AI Agent 具备屏幕感知和鼠标键盘操控能力。由 OpenClaw 作者 Peter 开发,从 v3.0.0-beta 到最近的 v3.1.x 密集更新。

简单理解:给你的 Mac 装一双带眼睛的手——Agent 能看到屏幕内容,也能操作鼠标和键盘。

Peekaboo v3 功能概览

核心能力拆解

"看"的能力

  • 像素级截图:窗口截图、全屏截图、菜单栏截图
  • 读取 UI 元素:获取 macOS 上每个 UI 元素的位置、类型、label 等属性
  • 真正做到"看懂"屏幕上有什么,而不是简单地截个图

"动"的能力

  • 点击、双击
  • 输入文字
  • 按快捷键
  • 滚动
  • 拖拽
  • 切窗口、切桌面(Space)
  • 点击 Dock 图标
  • 处理系统弹窗

基本覆盖了人类用 Mac 会做的所有操作。

MCP 打包

Peekaboo v3 支持把所有能力打包成 MCP(Model Context Protocol)服务,直接喂给你常用的 AI 工具。

实际例子:在 Cursor 里写代码,UI 出了 bug——以前要自己截屏发给 Cursor。现在 Cursor 自己就能截图、看屏幕、改代码、重新跑一遍验证,全程不需要你插手。

Peekaboo 集成 Cursor 工作流

自然语言模式

支持自然语言 Agent 模式,提示词可以直接用大白话描述任务,不需要写特定的命令格式。

实际使用案例

有网友做了一个烟雾测试:让 Hermes 操作计算器、Peekaboo 读屏幕结果、Python 独立验证答案是否正确,三条链路并行协作,一次通过。

Peekaboo 计算器测试

适合的使用场景

  • UI 自动化测试:Agent 自己截图、自己看、自己操作、自己验证
  • 重复性桌面操作:批量处理文件、填表、搬运数据
  • 开发调试:代码改完自动截图看效果,不用手动切换窗口
  • 邮件和信息处理:自动翻找、阅读、回复邮件

获取方式

Peekaboo 是开源项目,可通过 OpenClaw 官方渠道获取。v3.1.x 系列是最近的密集更新版本。

注意: 目前仅支持 macOS。Windows 和 Linux 支持尚未确认。

所有文章

作者

avatar for toolin小编
toolin小编

分类

  • AI产品
Peekaboo 是什么核心能力拆解"看"的能力"动"的能力MCP 打包自然语言模式实际使用案例适合的使用场景获取方式

相关文章

Claude Code 额度翻倍 + Codex 永久免费:AI 编程工具大放水
AI产品

Claude Code 额度翻倍 + Codex 永久免费:AI 编程工具大放水

Anthropic 将 Claude Code 额度翻倍并取消高峰限制,OpenAI 则将 Codex 永久免费开放,开发者迎来 AI 编程工具的黄金窗口期。

avatar for toolin小编
toolin小编
1天前
千问接入淘宝实测:对话式购物从种草到下单全闭环
AI教程

千问接入淘宝实测:对话式购物从种草到下单全闭环

千问正式接入淘宝,用户可以在对话中完成搜索、比价、下单、支付、查物流全流程。四大场景实测 AI 购物体验。

avatar for toolin小编
toolin小编
3天前
MiniMax Mavis:让一群Agent帮你干活的协作系统
AI产品

MiniMax Mavis:让一群Agent帮你干活的协作系统

MiniMax发布多Agent协作产品Mavis,内置Leader-Worker-Verifier分工架构,一句话完成复杂长任务。

avatar for toolin小编
toolin小编
14小时前