Aller au contenu

Contrôlez n’importe quelle application Windows avec l’IA — aucune API requise

En bref : Laissez Claude, Cursor, VS Code ou ChatGPT cliquer sur des boutons, remplir des formulaires et lire l’interface de n’importe quelle application Windows native via UI Automation — même les applications qui n’exposent aucune API. Local, sans droits administrateur.

L
LMCP··5 min de lecture

Moyenne 4,7 sur 5 · Notes : 39Voir tous les avis →

  • “calander and reminders”

    Shawn E.
  • “Sort, clean up inbox. Text people reminders for payments using imessage”

    Adi H.
  • “Claude Zugriff auf Mails /Kalender gewähren”

    TB

Pour laisser Claude cliquer sur des boutons et remplir des formulaires dans n’importe quelle application Windows, installez LMCP — un serveur MCP local qui pilote l’infrastructure Windows UI Automation, la même couche d’accessibilité qu’utilisent les lecteurs d’écran. Comme il lit et contrôle directement l’interface, il fonctionne avec toute application Windows native, y compris celles qui ne disposent d’aucune API ni prise en charge de l’automatisation.

Si le client d’IA sélectionné utilise un fournisseur d’IA cloud, ce fournisseur peut recevoir et traiter les données d’interface et résultats demandés pour le flux selon ses propres conditions.

Ce que vous pouvez faire

  • Lire l’arborescence de l’interface — obtenez une carte structurée et étiquetée des boutons, champs et menus d’une application en cours d’exécution
  • Trouver des éléments et attendre leur apparition — localisez un contrôle précis ou attendez qu’il apparaisse avant d’agir
  • Cliquer — sur un élément ou à une coordonnée d’écran
  • Saisir du texte — dans le contrôle actif ou dans un contrôle précis
  • Envoyer des combinaisons de touches — comme ctrl+s ou ctrl+shift+n
  • Cliquer sur une icône de la zone de notification — à partir de son libellé, sans chercher des coordonnées de pixels

Ce mécanisme est différent des outils Outlook, Teams ou OneDrive de LMCP : ceux-ci utilisent les données propres à une application ou son interface COM. UI Automation pilote plutôt l’interface elle-même, ce qui lui permet de fonctionner avec les applications qui n’exposent rien d’autre.

Installation

Téléchargez LMCP pour Windows et installez-le :

  1. Exécutez le fichier LMCP-Setup téléchargé depuis votre dossier Téléchargements
  2. Suivez le programme d’installation — aucun droit administrateur n’est nécessaire, il s’installe dans votre dossier utilisateur
  3. LMCP démarre automatiquement et apparaît dans votre zone de notification
Ou installez avec winget
winget install LMCP.LocalMCP

L’opération prend environ 30 secondes. Vos clients IA sont configurés automatiquement.

Redémarrez ensuite votre client IA et essayez-le avec n’importe quelle application ouverte.

Exemples de requêtes

  • « Lis l’interface de l’application ouverte et indique-moi quels contrôles sont visibles » — cartographie d’abord l’interface, avant toute action
  • « Claude peut-il cliquer sur des boutons et remplir des formulaires dans n’importe quelle application Windows à ma place ? » — oui, c’est précisément le rôle de UI Automation
  • « Automatise une ancienne application de bureau avec l’IA, sans API » — trouve les champs, saisit les valeurs, puis clique sur Envoyer
  • « Attends la fin de l’exportation, puis clique sur Enregistrer » — attend l’apparition d’un élément avant d’agir

Flux de travail réel

Saisie répétitive de données dans une application ancienne

Copiez cette requête dans votre IA

Lis l’arborescence de l’interface de cette ancienne application d’inventaire, trouve le formulaire « New Entry », puis remplis-le avec les valeurs de cette feuille de calcul, ligne par ligne.

Votre IA cartographie d’abord le formulaire, puis le pilote — pas d’enregistreur de macros, ni de suppositions sur des coordonnées d’écran qui cessent de fonctionner dès qu’une fenêtre est redimensionnée.

LMCP connecte aussi votre assistant IA à la gestion des fenêtres et des moniteurs, à Outlook et à Microsoft Teams sur Windows. Consultez la liste complète des guides ou apprenez-en davantage sur local-mcp.com.

Limites

  • Windows uniquement — UI Automation est une infrastructure d’accessibilité Windows ; LMCP ne propose pas d’outil équivalent sur macOS ni Linux.
  • Lit et pilote ce qui est à l’écran — une fenêtre réduite ou masquée peut ne pas exposer tous les éléments comme le ferait une fenêtre au premier plan.
  • Dépend de la disposition — une application qui modifie son interface entre deux versions peut modifier les éléments que trouve LMCP ; relire l’arborescence de l’interface après une mise à jour corrige ce problème.
  • Ne remplace pas une intégration native — pour les applications auxquelles LMCP fournit déjà un outil dédié (Outlook, Teams, OneDrive), ces outils sont plus rapides et plus fiables que le pilotage de l’interface.

Questions fréquentes

Claude peut-il cliquer sur des boutons et remplir des formulaires dans n’importe quelle application Windows à ma place ?

Oui — LMCP pilote l’infrastructure Windows UI Automation, qui fonctionne avec toute application Windows native, y compris celles qui n’ont aucune API.

Puis-je automatiser une ancienne application de bureau Windows avec l’IA sans API ?

Oui. Puisque UI Automation lit et contrôle directement l’interface, l’application n’a pas besoin d’exposer sa propre surface d’automatisation.

Des droits administrateur sont-ils nécessaires ?

Non — LMCP s’installe et s’exécute par utilisateur. Certaines applications exécutées avec élévation peuvent toutefois exiger que LMCP soit lui aussi exécuté avec élévation pour les contrôler ; il s’agit d’un détail du modèle d’autorisations de Windows, pas d’une exigence de LMCP.

Guides associés

Commentaires

Les commentaires sont vérifiés avant publication.