dsh-computer-use

DSH Computer Use

面向 DSH 的文本优先浏览器与 macOS 后台控制。

锁定正确的进程和窗口，不抢前台，也不移动用户的鼠标。

English · 架构 · 分发 · 安全

安装

1. 从 Releases 下载最新版 DSH-Computer-Use-*-universal.dmg。
2. 将 DSH Computer Use 拖入“应用程序”并打开。
3. 按设置中心引导授权“辅助功能”和“屏幕录制”。
4. 在“DSH 插件”一行点击“安装”，然后重启正在运行的 DSH Host。

官方 DMG 是 Universal 2，经过 Developer ID 签名、Apple 公证，并附带 SHA-256 校验和。普通用户不需要安装 Xcode、Swift，也不需要下载源码；系统中需要已有 DSH 和 Google Chrome。

能做什么

控制面	感知	输入
Chromium	Playwright、CDP Accessibility/DOM、frame、标签页、可选 OCR	基于 ref 的导航、鼠标、键盘、表单、滚动、拖拽、上传
macOS	Accessibility 树优先，Vision OCR 补语义，独立窗口捕获	AX 语义动作、定向 SkyLight/CoreGraphics，无目标时才用全局 HID

每次动作都会返回新的、有预算上限的文本观察。模型读取 role、name、value、状态、几何和稳定 snapshot ref，不会假装自己能看懂截图。页面文字与 OCR 内容统一视为不可信 UI 数据。