
02 / 13
Étude de cas — Hackathon H Company × 42AI · Agent computer use
2026
Nami
01Le projet
- Rôle
- Lead agent computer use
- Année
- 2026
- Catégorie
- Hackathon H Company × 42AI · Agent computer use
- Stack
- Next.js 16
- React 19
- TypeScript
- H Agents API
- CDP
- Gladia
- Linkup
- zod
- vitest
Un agent de voyage vocal qui remplit les formulaires officiels dans un Chrome visible et s'arrête toujours avant le paiement. Construit en 36 heures, Paris, 7 et 8 novembre 2026.
Un voyage lointain, c'est surtout des papiers : pour Bali, un visa électronique, une carte d'arrivée et une taxe touristique sur trois sites officiels, entourés de sites miroirs qui font payer des formulaires gratuits. Le hackathon H Company × 42AI portait sur les agents « computer use » : des IA qui observent un écran et agissent par clics et saisies.
Mon rôle
Responsable de l'agent H (computer use) dans une équipe de quatre : création et suivi des sessions, consignes et conditions d'arrêt, pont vers le navigateur local, module Vol et banc de démo sur mon Mac.
02Approche
L'utilisateur parle comme à un concierge. Nami comprend la demande, déduit les papiers nécessaires, retrouve le passeport sur l'ordinateur et le lit avec un modèle de vision, MRZ vérifiée.
Un agent H pilote un Chrome dédié par le port de débogage (CDP) : il remplit le visa e-VOA puis la carte d'arrivée, et cherche un vol réel sur Google Flights. Le dépôt de fichiers et les menus fragiles passent par des outils personnalisés servis par Nami.
Les garde-fous sont dans le code, pas dans la bonne volonté de l'agent : domaine officiel obligatoire, boutons interdits (Submit, Pay, Sign in…), contenu des pages traité comme non fiable, arrêt par construction avant tout envoi ou paiement.
Robustesse quand l'API H ralentit
réessai, relance automatique d'une session muette au bout de 45 s, libération locale du navigateur, repli de modèle. Chaque correction rejouée en réel avec des scripts.
03Résultats
Visa e-VOA : menus, passeport et photo déposés, arrêt à l'étape 1 sans clic humain (60 à 125 s)
Carte d'arrivée remplie, arrêt avant Submit ; vols réels lus en 13 s, page de réservation en 27 s
Environ 0,09 $ par session de visa
Équipe : ~117 PR fusionnées, 1 018 tests vitest, lint et build verts au rendu
Parcours complet à la voix démontré sur mon Mac la nuit du 7 au 8 novembre
04En images




05Liens
Projet suivant
Hackathon · Rédaction assistée paie & RH — 2026
