JasonWei04/dsh-computer-use ↗★ 1
dsh-computer-use
DSH 电脑操作插件:支持截屏/录屏、Xiaomi MIMO 视觉分析、真实鼠标键盘及程序控制,实现自主循环操作。
AI 分析
核心用途是让 AI 能够直接控制 Windows 电脑执行任务。适合需要自动化桌面操作、软件测试或视觉辅助决策的用户。前置条件是必须先安装 web_ui 全家桶。
安装
$
npx -p @deepseek-ai/dsh dsh plugin --profile web add github:JasonWei04/dsh-computer-use说明文档
阅读完整 README ↗配置视觉(MIMO)
设置 Windows 环境变量(用户级即可):
MIMO_API_KEY = sk-你的密钥
插件每 30 秒自动重新探测密钥;没有密钥时截图类工具仍可用,只是 analyze 与 computer_use 的视觉决策不可用。
⚙️ 配置项
可在 DSH 设置界面的「dsh-computer-use」分区(settings card)调整:
| 配置 | 默认值 | 说明 |
|---|---|---|
baseURL | https://api.xiaomimimo.com/v1 | MIMO(OpenAI 兼容)端点 |
model | 空(自动选择) | 视觉模型 id,如 mimo-v2.5 |
apiKeyEnv | MIMO_API_KEY | 读取密钥的环境变量名 |
maxOutputTokens | 4096 | 视觉响应最大 token |
timeoutMs | 120000 | 视觉请求超时 |
helperExe | 空(自动编译) | 指定已编译的助手 exe 路径,跳过编译 |
enabled | true | 总开关 |
announceToAgent | true | 启动时向 agent 宣告本插件能力 |
💡 使用示例
「打开记事本,输入 Hello, DSH! 并保存」
computer_action(action="run", command="notepad")computer_screenshot(analyze=true)—— 确认记事本已打开computer_action(action="type", text="Hello, DSH!")computer_action(action="keys", keys="^{s}")—— Ctrl+S 保存
「在微信里给当前聊天发送『今晚八点开会』」
computer_action(action="sendchat", text="今晚八点开会")
「打开 PyCharm,在项目里创建一个 test.py」—— 直接交给
computer_use:
computer_use(task="打开 PyCharm,在打开的文件夹下创建 test.py,内容为 print('hi')")