Controle qualquer aplicativo do Windows com IA — Sem necessidade de API
Deixe Claude, Cursor, VS Code ou ChatGPT clicar em botões, preencher formulários e ler a interface de qualquer aplicativo nativo do Windows por meio do UI Automation — até mesmo aplicativos sem nenhuma API. Local e sem necessidade de direitos de administrador.
Para deixar o Claude clicar em botões e preencher formulários em qualquer aplicativo do Windows, instale o LMCP — um servidor MCP local que usa a estrutura Windows UI Automation, a mesma camada de acessibilidade usada por leitores de tela. Como ele lê e controla a interface diretamente, funciona com qualquer aplicativo nativo do Windows, até mesmo aqueles que não têm nenhuma API nem suporte de automação.
Se o cliente de IA selecionado usar um provedor de IA na nuvem, esse provedor poderá receber e processar os dados da interface e resultados solicitados para o fluxo de acordo com os próprios termos.
O que você pode fazer
- Ler a árvore da interface — obtenha um mapa estruturado e identificado dos botões, campos e menus de um aplicativo em execução
- Encontrar e aguardar elementos — localize um controle específico ou espere que ele apareça antes de agir
- Clicar — em um elemento ou por coordenada de tela
- Digitar texto — no controle em foco ou em um específico
- Enviar combinações de teclas — como
ctrl+souctrl+shift+n - Clicar em um ícone da bandeja do sistema — pelo rótulo, sem procurar coordenadas de pixels
Este é um mecanismo diferente das ferramentas do LMCP para Outlook, Teams ou OneDrive — elas se comunicam com os dados do próprio aplicativo ou com sua interface COM. Em vez disso, o UI Automation controla a própria interface, o que faz com que funcione com aplicativos que não expõem nada além disso.
Como instalar
Baixe o LMCP para Windows e instale-o:
- Execute o
LMCP-Setup.exebaixado na pasta Downloads - Siga o instalador — não são necessários direitos de administrador; ele é instalado na sua pasta de usuário
- O LMCP inicia automaticamente e aparece na bandeja do sistema
Leva cerca de 30 segundos. Seus clientes de IA são configurados automaticamente.
Em seguida, reinicie seu cliente de IA e teste-o com qualquer aplicativo aberto.
Exemplos de instruções
- “Leia a interface do aplicativo que está aberto e diga quais controles estão visíveis” — primeiro mapeia a interface, antes de agir
- “O Claude pode clicar em botões e preencher formulários em qualquer aplicativo do Windows para mim?” — sim, é exatamente para isso que o UI Automation serve
- “Automatize com IA um aplicativo de desktop legado sem uma API” — encontre os campos, digite neles e clique em enviar
- “Espere a exportação terminar e depois clique em Salvar” — espera que um elemento apareça antes de agir
Fluxo de trabalho real
Entrada repetitiva de dados em um aplicativo legado
Leia a árvore da interface deste aplicativo legado de inventário, encontre o formulário “New Entry” e preencha-o com os valores desta planilha, uma linha de cada vez.
Sua IA primeiro mapeia o formulário e depois o controla — sem gravador de macros nem suposições sobre coordenadas de tela que se quebram assim que uma janela é redimensionada.
O LMCP também conecta seu assistente de IA ao gerenciamento de janelas e monitores, ao Outlook e ao Microsoft Teams no Windows. Consulte a lista completa de guias ou saiba mais em local-mcp.com.
Limitações
- Somente Windows — UI Automation é uma estrutura de acessibilidade do Windows; não há ferramenta equivalente no LMCP para macOS ou Linux.
- Lê e controla o que está na tela — uma janela minimizada ou oculta pode não expor todos os elementos da mesma maneira que uma em primeiro plano.
- Depende do layout — um aplicativo que muda sua interface entre versões pode alterar os elementos encontrados pelo LMCP; releia a árvore da interface após uma atualização para corrigir isso.
- Não substitui uma integração nativa — para aplicativos para os quais o LMCP já tem uma ferramenta dedicada (Outlook, Teams, OneDrive), elas são mais rápidas e confiáveis do que controlar a interface.
Perguntas frequentes
O Claude pode clicar em botões e preencher formulários em qualquer aplicativo do Windows para mim?
Sim — o LMCP usa a estrutura Windows UI Automation, que funciona com qualquer aplicativo nativo do Windows, inclusive aqueles sem nenhuma API.
Posso automatizar um aplicativo de desktop legado do Windows com IA sem uma API?
Sim. Como o UI Automation lê e controla a interface diretamente, ele não precisa que o aplicativo exponha nenhuma superfície de automação própria.
Isso precisa de direitos de administrador?
Não — o LMCP é instalado e executado por usuário. Alguns aplicativos executados com privilégios elevados ainda podem exigir que o LMCP seja executado com privilégios elevados para controlá-los; isso é um detalhe do modelo de permissões do Windows, não um requisito do LMCP.
Guias relacionados
Comentários
Os comentários são revisados antes da publicação.