dsh-mac-computer-use
Mac 的视觉优先 computer use:无障碍树不可用时照样能干活。11 个 desktop_* 工具——窗口枚举、截图、OCR 找文字、元素编号、坐标点击、输入、滚动、拖拽,外加 Codex 风格的浮层光标(带弹簧动效)。点击投递给目标进程,不移动真实鼠标、不抢前台。DSH 插件页里显示为「Mac 桌面操作」,设置页会逐项检查命令行引擎和屏幕录制 / 辅助功能权限,缺哪个直接给按钮。装上就能用:安装包自带 dsh-cu 引擎和浮层的通用二进制(Apple 芯片 + Intel,macOS 11 起,本地签名),由发版工作流从仓库里的 Swift 源码编译——不用 clone、不用 Xcode、不用 install.sh。唯一的设置是给 DeepSeek Harness 开一次屏幕录制和辅助功能权限。仅支持 macOS;在 Windows / Linux 上插件照常加载,只是不注册桌面工具。
- 形态
- Plugin 插件
- 安装
- npm 包安装
- 需要密钥
- 否
- 近月下载
- 2,136
- 最近推送
- 今天更新
Original description
Vision-first desktop computer use for DSH on macOS: OCR text targeting, set-of-mark indices, 11 desktop_* tools and a visible cursor. No accessibility tree. · 让 DSH 看着屏幕操作你的 Mac。
安装方式
npm 包安装 · 安装无需配置
dsh plugin --profile web add dsh-mac-computer-use为什么是这个分数
近 1 天仍在推送;README 未给出明确安装命令,需要自己读;装完即可用,无需额外配置;近月 npm 下载 2136 次,star 不多但真在被使用。
- 维护活跃
- 100
- 实用度
- 84
- 生态热度
- 67
- 上手便捷
- 32
- 信号质量
- 18
- 数据置信度
- 75%
相关插件
dsh-desktop-sidecar
111xjyuan/dsh-desktop-sidecar
原生 Windows 桌面控制,共 21 个工具:UIA 控件树 + 离线 OCR 看屏幕、按控件名字点击、不占剪贴板地打中文,微信 / Office / 浏览器 / 网课都能操作。不抢你的鼠标键盘(你在用它会等)、从不改你的窗口大小,侧边栏「指挥台」可随时打字纠正,每步操作后都会回头核对屏幕并如实说明结果。内置持久登录的网页通道,无需驱动、无额外运行时。
macos-computer-use-kit
Sur-Cai/macos-computer-use-kit
DeepSeek Harness 的 macOS computer use:基于无障碍树的稳定 ref 定位、后台输入、Unicode 输入、菜单与应用、set-of-mark 截图、本地 OCR 与动作校验——11 个工具桥接 macos-cu CLI。
esp32-iphone-agent
onehumanbeing/esp32-iphone-agent
Let an AI model use a real iPhone with a $7 ESP32: AirPlay eyes, USB HID hands, any OpenAI-compatible vision model. No Mac, no developer account, no jailbreak.