跳到正文

使用 AI 控制任何 Windows 应用 — 无需 API

简而言之: 让 Claude、Cursor、VS Code 或 ChatGPT 通过 UI Automation 点击按钮、填写表单并读取任何原生 Windows 应用的界面 — 即使应用根本没有 API。本地,无需管理员权限。

L
LMCP··阅读时间 5 分钟
创建账户并下载

只需几秒。下载会自动开始。 已有账户?登录

安装指南 →

平均 4.7 分(满分 5)· 评分数:39查看全部评价 →

  • “calander and reminders”

    Shawn E.
  • “Sort, clean up inbox. Text people reminders for payments using imessage”

    Adi H.
  • “Claude Zugriff auf Mails /Kalender gewähren”

    TB

要让 Claude 在任何 Windows 应用中点击按钮和填写表单,请安装 LMCP — 这是一个本地 MCP 服务器,可驱动 Windows UI Automation 框架,即屏幕阅读器所使用的同一辅助功能层。由于它直接读取并控制界面,因此能用于任何原生 Windows 应用,即使它们完全没有 API 或自动化支持。

如果所选 AI 客户端使用云端 AI 提供商,该提供商可能会接收和处理该工作流所请求的界面数据和任务结果,并适用其自身条款。

您可以做什么

  • 读取 UI 树 — 获取运行中应用的按钮、字段和菜单的结构化标注地图
  • 查找并等待元素 — 定位特定控件,或在操作前等待它出现
  • 点击 — 点击元素或按屏幕坐标点击
  • 输入文本 — 在获得焦点的控件或指定控件中输入
  • 发送组合键 — 例如 ctrl+s 或 ctrl+shift+n
  • 点击系统托盘图标 — 通过其标签点击,无需寻找像素坐标

这与 LMCP 的 Outlook、Teams 或 OneDrive 工具采用不同的机制 — 那些工具与应用自身的数据或 COM 接口通信。UI Automation 则直接驱动界面本身,因此可以用于没有暴露其他任何内容的应用。

如何安装

下载适用于 Windows 的 LMCP并安装:

  1. 从“下载”文件夹运行已下载的 LMCP-Setup
  2. 按照安装程序操作 — 无需管理员权限;它会安装到您的用户文件夹
  3. LMCP 会自动启动并出现在系统托盘中
或使用 winget 安装
winget install LMCP.LocalMCP

大约需要 30 秒。您的 AI 客户端会被自动配置。

然后重启您的 AI 客户端,并在任意打开的应用上试用。

示例提示

  • “读取我当前打开的应用的 UI,并告诉我有哪些可见控件” — 在操作前先映射界面
  • “Claude 可以替我在任何 Windows 应用中点击按钮和填写表单吗?” — 可以,这正是 UI Automation 的用途
  • “用 AI 自动化没有 API 的旧版桌面应用” — 找到字段、输入内容并点击提交
  • “等待导出完成,然后点击保存” — 在操作前等待元素出现

真实工作流

在旧版应用中重复录入数据

将此提示复制到你的 AI

读取这个旧版库存应用的 UI 树,找到“New Entry”表单,并用这个电子表格中的值逐行填写它。

您的 AI 会先映射表单,然后驱动它 — 无需宏录制器,也无需进行窗口一调整大小就会失效的屏幕坐标猜测。

LMCP 还会将您的 AI 助手连接到 Windows 上的窗口和显示器管理、Outlook和Microsoft Teams。请查看完整指南列表,或访问 local-mcp.com 了解更多信息。

限制

  • 仅限 Windows — UI Automation 是 Windows 辅助功能框架;LMCP 在 macOS 或 Linux 上没有等效工具。
  • 读取并驱动屏幕上的内容 — 最小化或隐藏的窗口可能无法像前台窗口那样暴露所有元素。
  • 依赖布局 — 应用在不同版本之间更改界面后,LMCP 找到的元素也可能改变;解决方法是在更新后重新读取 UI 树。
  • 不能替代原生集成 — 对于 LMCP 已有专用工具的应用(Outlook、Teams、OneDrive),这些工具比驱动 UI 更快、更可靠。

常见问题

Claude 可以替我在任何 Windows 应用中点击按钮和填写表单吗?

可以 — LMCP 驱动 Windows UI Automation 框架,它适用于任何原生 Windows 应用,包括完全没有 API 的应用。

我可以用 AI 自动化没有 API 的旧版 Windows 桌面应用吗?

可以。由于 UI Automation 直接读取并控制界面,不需要应用自身暴露任何自动化接口。

这需要管理员权限吗?

不需要 — LMCP 按用户安装和运行。一些以提升权限运行的应用仍可能要求 LMCP 也以提升权限运行才能控制它们;这是 Windows 权限模型的细节,而不是 LMCP 的要求。

相关指南

评论

评论在发布前需要审核。