1 v0.5.1 更新于 2026-11-08

Sidehand MCP Server

Let AI agents operate Windows apps behind your window, without taking your mouse or keyboard.

适用客户端

本地客户端

Claude Desktop、Claude Code、Cursor、Cline 等支持本地 MCP 的客户端

本地运行(npm)

{
  "mcpServers": {
    "sidehand": {
      "command": "npx",
      "args": [
        "-y",
        "sidehand"
      ]
    }
  }
}

将上方 JSON 加入 MCP 客户端配置(如 Claude Desktop 的 claude_desktop_config.json 或项目的 .mcp.json)即可接入;远程接入按客户端要求填写 URL 与鉴权头。

ui_tree

以文本形式读取指定窗口的控件树,每个控件带引用标识

ui_ocr

通过 Windows OCR 读取自绘窗口(游戏、Qt、canvas)的文本并提供可点击的引用标识

ui_act

对窗口控件执行操作,如输入、点击、选择、勾选、按键、滚轮、拖拽等