Computer Use : Claude voit, clique et navigue
Computer Use permet à Claude de voir votre écran et d'interagir avec vos applications comme un humain. Ce chapitre vous apprend à exploiter cette capacité concrètement.
🎯 Objectif
📋 Prérequis
🔬 Comment Computer Use fonctionne
Computer Use fonctionne en boucle continue : Claude capture votre écran, analyse ce qu'il voit (fenêtres, boutons, texte), décide quoi faire, puis agit (clic, frappe, scroll). Ce cycle se répète jusqu'à ce que la mission soit accomplie.
Ce que Claude voit bien :
- Texte à l'écran, éléments d'interface (boutons, menus, onglets)
- Applications courantes (Excel, Word, Chrome, Outlook, Slack...)
- Icônes, logos et structure spatiale des fenêtres
Ce qui peut poser problème :
- Interfaces à très faible contraste ou mode sombre extrême
- PDF scannés de mauvaise qualité
- Ecrans multiples (Claude travaille sur un écran à la fois)
🖱️ Ce que Claude peut faire sur votre écran
Clic simple, double-clic, clic droit, glisser-déposer, défilement, sélection de texte.
Frappe de texte, raccourcis (Ctrl+C/V/S/Z), touches spéciales (Tab, Entrée, Echap), combinaisons système (Alt+Tab).
Changer de fenêtre, ouvrir des applications, naviguer dans le navigateur (URLs, onglets), parcourir l'explorateur de fichiers.
🚀 Cas pratiques multi-applications
Cas 1 : Recherche web → Document de synthèse
🎯 MISSION : Veille concurrentielle sur 3 concurrents avec document de synthèse. 📋 CONTEXTE : Product manager SaaS gestion de projet. Comparatif rapide pour décision stratégique. ✅ LIVRABLE : 1. Ouvre Chrome et visite monday.com, asana.com, clickup.com 2. Note pour chacun : positionnement, pricing, features clés 3. Crée "Veille_Concurrentielle.docx" dans Word 4. Structure : tableau comparatif + recommandations 5. Sauvegarde sur le bureau ⚠️ CONTRAINTES : Infos publiques uniquement. Max 3 pages. Inclure les URLs sources.
Claude ouvre Chrome, visite chaque site, collecte les informations, puis crée le document Word structuré. Le tout en 3-4 minutes.
Cas 2 : Email → CRM → Fichier Excel
🎯 MISSION : Traiter l'email d'Acme Corp et mettre à jour nos systèmes de suivi. 📋 CONTEXTE : Customer success manager. Acme Corp vient de signer un avenant pour 3 licences supplémentaires. 📄 INPUTS : - Email de jean.dupont@acme.com reçu aujourd'hui - CRM HubSpot (fiche Acme Corp) - "Suivi_Clients_2026.xlsx" dans Documents/CS ✅ LIVRABLE : 1. Lis l'email dans Outlook, note les infos clés 2. Ouvre HubSpot → fiche Acme Corp → mets à jour le contrat 3. Ouvre le fichier Excel → ajoute une ligne avec les infos 4. Sauvegarde et confirme les mises à jour ⚠️ CONTRAINTES : NE PAS répondre à l'email.
⚡ Astuces pour des sessions fluides
Fermez les fenêtres inutiles. Un bureau dégagé accélère la reconnaissance.
Au lieu de "ouvre Excel", dites "double-clique sur Ventes.xlsx visible sur le bureau".
"Utilise Ctrl+N pour créer un nouveau document" est souvent plus fiable qu'un clic dans les menus.
Claude est plus précis quand une seule application est au premier plan en plein écran.
✏️ Exercice pratique
🏋️ Navigation web → Document
Demandez à Claude de réaliser cette mission complète :
Ouvre Chrome et effectue les actions suivantes : 1. Va sur lemonde.fr et note les 3 titres principaux 2. Ouvre un nouvel onglet, va sur reuters.com 3. Note les 3 titres internationaux principaux 4. Ouvre Word et crée "Revue_Presse.docx" avec les 6 titres classés par source 5. Ajoute la date du jour en en-tête 6. Sauvegarde sur le bureau
Critères de réussite : Document créé avec les titres réels des sites visités, sans copier-coller de votre part.
✅ Résultat attendu
⚠️ Erreurs fréquentes
📝 Ce qu'on retient
- Computer Use = cycle voir → décider → agir, répété en boucle jusqu'à complétion de la mission.
- Claude peut cliquer, taper, défiler, glisser-déposer et utiliser les raccourcis clavier.
- Les workflows multi-apps sont la force majeure : enchaîner Chrome, Excel, Outlook dans une même mission.
- Préparez votre écran et précisez le chemin visuel pour des sessions fluides.
- Le bouton Pause est votre filet de sécurité si Claude part dans la mauvaise direction.
Dans le Chapitre 4, vous découvrirez comment Cowork gère vos fichiers et documents : lire, créer, modifier des Excel, PDF, Word et PowerPoint avec un workflow documentaire complet.