Aller au contenu
ReviewRamble

La lettre hebdomadaire

L’IA, évaluée, dans votre boîte mail.

  • Les nouveaux tests d’outils, de modèles, de serveurs MCP et de dépôts, avec le verdict en premier
  • Les prix et les notes revérifiés quand quelque chose change
  • Les nouvelles analyses dès leur publication

Modèles, agents, serveurs MCP et les outils qui méritent vraiment votre temps.

Un e-mail par semaine. Désinscrivez-vous avec le lien présent dans chaque lettre. Comment nous utilisons votre e-mail

Open Computer Use

Serveur MCP local qui pilote les apps de bureau en arrière-plan via les API d'accessibilité, avec les mêmes outils sur macOS, Windows et Linux.

Avis de ReviewRamble editors · Mis à jour

Guide d’installation Open source

Partager cette page :XLinkedInFacebookRedditWhatsAppE-mail

Notre note

3.5/5

Un serveur de computer use soigné et prudent, solide côté macOS, dont les versions Windows et Linux restent, de son propre aveu, expérimentales.

Qu’est-ce que Open Computer Use ?

Open Computer Use, de l'utilisateur GitHub opensymph, permet à un agent de voir et de manipuler les apps de votre propre ordinateur. Il lit l'arbre d'accessibilité d'une fenêtre, la liste étiquetée des boutons et des champs qu'utilisent les lecteurs d'écran, ainsi qu'une capture d'écran, puis clique, tape, fait défiler, glisse et fixe des valeurs par numéro d'élément ou par coordonnées. Les saisies vont à l'app cible au lieu de passer par votre vrai pointeur et votre clavier, si bien que vous pouvez continuer à travailler pendant qu'il agit. Les noms et arguments de ses outils suivent le plugin de computer use intégré à Codex d'OpenAI.

Neuf outils de base sont identiques sur macOS, Windows et Linux ; cinq outils de fenêtre fonctionnent sur macOS et Windows, et macOS ajoute une capture de l'écran entier. Le runtime macOS est écrit en Swift, ceux de Windows et Linux en Go, tous livrés dans un seul paquet npm. Le projet est sous licence MIT, a été créé le 23 août 2026, compte environ 25 étoiles et 97 commits, et a publié la v1.3.0 le 17 octobre 2026.

Installer Open Computer Use

npm i -g @opensymph/open-computer-use && ocu install-claude-mcp

Open Computer Use vaut-il le coup ?

Open Computer Use repose sur une promesse : l'agent travaille dans une app pendant que vous gardez la souris. Sur macOS, le clic par défaut essaie d'abord les actions d'accessibilité de l'app elle-même, puis envoie des événements souris au seul processus de cette app ; le vrai pointeur ne bouge que si vous définissez OPEN_COMPUTER_USE_ALLOW_GLOBAL_POINTER_FALLBACKS=1. Un curseur logiciel visible montre où agit l'agent, et l'app macOS signée conserve ses autorisations d'Accessibilité et d'Enregistrement de l'écran d'une mise à jour à l'autre. Un même contrat sur trois systèmes signifie qu'un seul prompt peut piloter la même app sur un Mac, un PC Windows et un bureau Linux.

Les garde-fous sont des réglages par défaut raisonnables, pas un bac à sable. Les gestionnaires de mots de passe sont toujours refusés. Sous Windows, la touche Windows est bloquée, les terminaux et les apps de sécurité figurent sur une liste de refus, et lancer des apps, prendre le focus ou envoyer des saisies au premier plan exigent chacun leur propre variable d'environnement. La politique de sécurité du projet dit clairement que l'outil a par nature des privilèges élevés, qu'il ne doit tourner que sur des machines qui vous appartiennent ou pour lesquelles vous avez une autorisation, et qu'elle exclut les risques liés à votre usage. Tout ce que l'agent voit, il peut l'actionner : un e-mail ou une page web qu'il lit est une injection de prompt possible, avec votre bureau derrière.

Les données restent locales pour ce qui est du transport. Le serveur parle stdio, n'ouvre aucun port réseau et, sur macOS, joint son app auxiliaire par un socket Unix local. Les captures de fenêtre et le texte d'accessibilité partent malgré tout vers le modèle qu'utilise votre agent, et le README ne dit rien de la télémétrie. Des outils en ligne de commande distincts peuvent capturer ou enregistrer tout le bureau et envoyer des saisies globales, mais ils restent hors de la liste des outils MCP et les commandes de saisie sont désactivées tant que vous ne les activez pas.

Le hic : les notes d'architecture du projet qualifient d'expérimentaux les runtimes Windows et Linux. Windows n'a ni signature de code ni curseur visible, et les mesures du projet lui-même donnent environ 2.0 s pour une saisie et environ 3.5 s pour lister les apps. Linux exige une session de bureau ouverte, les outils de fenêtre renvoient "not supported yet" et les captures échouent ou sortent noires sous GNOME avec Wayland. Avec environ 25 étoiles, trois contributeurs et aucune version depuis le 17 octobre 2026, le projet est jeune et calme.

Notre avis : pour un utilisateur de Mac qui veut du computer use en arrière-plan à la manière de Codex dans Claude Code ou Gemini CLI, c'est une installation soignée et simple ; sous Windows ou Linux, considérez-le comme un aperçu prometteur et donnez-lui un compte utilisateur à part, pas votre bureau principal.

Là où il fait la différence

  • Un développeur iOS sur Mac dans un petit studio

    Parcourir un écran de réglages dans le Simulator et une app de design tout en continuant à taper dans l'éditeur

    L'agent lit chaque fenêtre avec get_app_state et clique par numéro d'élément en arrière-plan, le curseur logiciel montrant où il agit. Gratuit hors tokens du modèle.

  • Une analyste des opérations dans une entreprise de 30 personnes avec un client ERP uniquement de bureau sous Windows

    Reporter les chiffres d'un rapport hebdomadaire dans un tableur sans les retaper

    L'agent lit la fenêtre du rapport via UI Automation et tape dans le tableur avec type_text. Utilisez un compte à part : le runtime Windows est expérimental et chaque saisie prend environ 2.0 s selon les mesures du projet.

  • Un responsable QA qui teste une app GTK sur un bureau Linux

    Lancer le même test de fumée que l'équipe utilise déjà sur macOS

    Comme les neuf outils de base partagent noms et arguments, un seul script pilote les deux. Utilisez une session X11 : sous GNOME avec Wayland, les captures échouent et les clics par coordonnées sont au mieux.

Avant de vous engager

Mise en route
npm i -g @opensymph/open-computer-use, puis ocu doctor (sur macOS 14 ou ultérieur, il demande une fois l'Accessibilité et l'Enregistrement de l'écran), puis ocu install-claude-mcp, install-codex-mcp, install-gemini-mcp ou install-opencode-mcp. Tout autre client lance open-computer-use mcp en stdio.
Intégrations
Neuf outils de base (list_apps, get_app_state, click, perform_secondary_action, scroll, drag, type_text, press_key, set_value), cinq outils de fenêtre sur macOS et Windows, capture_display sur macOS. S'y ajoutent un plugin Codex, un plugin ZCode, une skill d'agent et la commande ocu call pour scripter sans client.
Données et confidentialité
Tourne en local en stdio et n'ouvre aucun port réseau ; sur macOS, la CLI joint son app auxiliaire par un socket Unix local. Les captures et le texte d'accessibilité vont au fournisseur du modèle de votre agent. Le README ne mentionne aucune télémétrie. Les correctifs de sécurité ne concernent que la dernière version npm.
Coût à grande échelle
Gratuit ; le coût, ce sont les tokens du modèle. Les arbres d'accessibilité sont plafonnés par défaut à 1 200 nœuds et 64 niveaux et les captures sont réduites, ce qui borne chaque lecture, mais les tâches longues totalisent quand même de nombreux appels.
Limites
Windows n'a ni signature de code ni curseur visible et exige une session de bureau ouverte ; via SSH, list_apps peut revenir vide. Les outils de fenêtre ne sont pas encore pris en charge sous Linux et les captures sous Wayland échouent ou sortent noires. macOS exige la version 14 ou ultérieure.

Les points forts

  • Saisies en arrière-plan sur macOS sans bouger votre pointeur
  • Les mêmes neuf outils sur macOS, Windows et Linux
  • Saisie globale, lancement d'apps et focus derrière des options explicites
  • Gestionnaires de mots de passe refusés ; app macOS signée

Les points faibles

  • Runtimes Windows et Linux qualifiés d'expérimentaux
  • Pas d'outils de fenêtre sous Linux ; captures en échec sous Wayland
  • L'agent peut lire et agir dans toute app qu'il voit
  • Projet jeune, trois contributeurs, environ 25 étoiles

Idéal pour

Développeurs sur Mac qui veulent qu'un agent manipule des apps natives en arrière-plan depuis Claude Code, Codex ou Gemini CLI.

Alternatives à Open Computer Use

Open Computer Use : questions fréquentes

Open Computer Use vaut-il le coup ?
Un serveur de computer use soigné et prudent, solide côté macOS, dont les versions Windows et Linux restent, de son propre aveu, expérimentales. Nous lui donnons 3.5 sur 5.
Combien coûte Open Computer Use ?
Gratuit et open source (MIT). Pas d'offre payante ; les appels au modèle sont payés à votre propre fournisseur.
Quels sont les inconvénients de Open Computer Use ?
Runtimes Windows et Linux qualifiés d'expérimentaux; pas d'outils de fenêtre sous Linux ; captures en échec sous Wayland; l'agent peut lire et agir dans toute app qu'il voit; projet jeune, trois contributeurs, environ 25 étoiles.
À qui s’adresse Open Computer Use ?
Développeurs sur Mac qui veulent qu'un agent manipule des apps natives en arrière-plan depuis Claude Code, Codex ou Gemini CLI.
Combien coûte Open Computer Use pour une équipe ou en production ?
Gratuit ; le coût, ce sont les tokens du modèle. Les arbres d'accessibilité sont plafonnés par défaut à 1 200 nœuds et 64 niveaux et les captures sont réduites, ce qui borne chaque lecture, mais les tâches longues totalisent quand même de nombreux appels.
Open Computer Use est-il sûr pour les données de l’entreprise ?
Tourne en local en stdio et n'ouvre aucun port réseau ; sur macOS, la CLI joint son app auxiliaire par un socket Unix local. Les captures et le texte d'accessibilité vont au fournisseur du modèle de votre agent. Le README ne mentionne aucune télémétrie. Les correctifs de sécurité ne concernent que la dernière version npm.
Quelles sont les meilleures alternatives à Open Computer Use ?
Les alternatives les plus proches que nous avons testées sont agent-desktop et Munim Computer Use.

Réponses vérifiées le 18 nov. 2026.