GhostDesk – Un bureau Linux complet pour votre agent IA
GhostDesk
, c’est un serveur MCP open source qui file à votre agent IA un bureau Linux complet tournant dans Docker. L’agent voit l’écran, clique, tape, lance des applis, comme un humain. Bref, c’est pas juste un browser à la Playwright, puisque grâce à lui, n’importe quelle interface graphique devient pilotable. Yoann Vanitou son créateur m’a pitché son projet par email, et comme j’ai trouvé ça cool, je vous emmène faire un petit tour du propriétaire.
Le principe c’est un conteneur Docker qui tourne avec un bureau Linux minimal, Firefox, un terminal, un éditeur de texte, une calculatrice, et un serveur MCP en frontal. Votre agent IA préféré se connecte alors sur http://localhost:3000/mcp, demande un screenshot, identifie ce qui est à l’écran, puis envoie des commandes souris et clavier via les douze outils exposés (click, drag, scroll, type, key press, copy/paste, launch app, etc.).
Et vous pouvez même regarder l’agent bosser en direct depuis votre navigateur sur le port 6080, via noVNC. C’est assez satisfaisant de voir l’IA cliquer toute seule dans Firefox, je dois bien le reconnaitre !
Là où Playwright et consorts sont coincés dans le browser, GhostDesk fonctionne ainsi sur n’importe quelle fenêtre. Un
workflow automatisé qui mélange plusieurs applis
, un ERP legacy, LibreOffice, un IDE, un client mail, peu importe…. Ça évite les bidouilles à base sélecteurs CSS ou code custom puisque l’agent interprète l’écran directement à partir des captures écran qu’il fait.
Et comme le serveur est pensé pour tourner avec des modèles locaux comme Qwen sur une workstation GPU, y’a vraiment aucune donnée qui sort de votre réseau et aucun coût API. Puis surtout, des cas d’usage sensibles (genre avec des données de santé, de la compta, du SI interne..etc) deviennent parfaitement envisageables. Claude et ChatGPT marchent aussi, mais avec les compromis habituels sur la latence et la confidentialité.
Pour tester, une seule commande Docker suffit :
docker run -d --shm-size 2g -p 3000:3000 -p 6080:6080 ghcr.io/yv17labs/ghostdesk:latest
Vous branchez ensuite votre client MCP sur localhost:3000/mcp, vous ouvrez localhost:6080 dans un onglet pour observer, et hop ! Pour la prod, y’a aussi un mode TLS plus bearer token qui chiffre le transport, parce qu’exposer un bureau Linux en clair sur le réseau, c’est pas l’idée du siècle, c’est vrai ^^.
Les applis pré-installées restent sobres, mais rien n’empêche de builder votre propre image avec d’autres logiciels.
Maintenant, le projet est très jeune et son développement repose quasi uniquement sur Yoann, donc je pense qu’il ne sera pas contre un petit coup de main. A voir avec lui.
Après côté licence, c’est une license non-concurrentielle qui interdit l’usage commercial rival pendant une période fixée avant bascule vers une licence ouverte classique.
Bref,
GhostDesk
c’est une idée sympa et je pense que si vous faites de l’automation d’applis desktop ou que vous voulez brancher un agent local sur un bureau virtuel sans payer d’API, ça mérite le coup d’œil !
Bravo à Yoann !
Source : korben.info