Laissez Claude contrôler directement votre navigateur : remplir des formulaires, poster des messages, et même faire glisser le CAPTCHA de type curseur

La plupart des gens utilisent l'IA en restant au stade du « tu demandes, il répond ». Le plugin Chrome de PandaNpc permet à votre Claude Code de vraiment mettre la main dans le navigateur, de cliquer pour vous, de remplir pour vous, de tourner les pages pour vous – et même de faire glisser le captcha à curseur pour vous. Grâce au protocole de développement Chrome, il injecte au niveau du noyau une entrée réelle avec isTrusted=true + une trajectoire de glissement anthropomorphique calculée par le backend, pour contourner l'anti-scraping et entrer dans les iframes cross-origin. 43 outils d'opération, avec un ensemble complet de cartes d'approbation + liste noire de domaines + interrupteur de pause + barrière de sécurité avec traçabilité des opérations.

PandaNpcPremière publication le
Laissez Claude contrôler directement votre navigateur : remplir des formulaires, poster des messages, et même faire glisser le CAPTCHA de type curseur

La plupart des gens utilisent l'IA en mode « tu demandes, il répond ». Mais beaucoup de tâches vraiment pénibles ne sont pas « trouver une réponse », mais devoir agir étape par étape dans une page web — remplir un formulaire champ par champ, coller du contenu préparé dans un éditeur web et le publier, parcourir des dizaines de pages pour copier des informations, ou encore faire glisser manuellement un CAPTCHA en se connectant. Ces tâches, l'IA pourrait normalement les faire à votre place, mais elle n'atteint pas votre navigateur.

L'extension Chrome PandaNpc comble ce fossé : elle permet à votre Claude Code de vraiment mettre la main dans votre navigateur, de cliquer, remplir, tourner les pages à votre place, et même de faire glisser le CAPTCHA. Ce n'est pas juste une capture d'écran qu'elle lui envoie pour qu'il vous dise quoi cliquer — c'est lui qui agit directement.

Qu'est-ce que c'est ?

En une phrase : une extension Chrome qui fait de Claude l'« opérateur » de votre navigateur.

Le principe est simple :

你的 Claude Code  →  cc-relay 中转  →  浏览器插件  →  操作你当前看的网页

Vous dites dans la conversation « Publie ce contenu pour moi », « Remplis ce formulaire », « Connecte-toi à ce site », et Claude appelle l'extension pour exécuter l'action sur l'onglet que vous êtes en train de regarder. L'extension est ses « mains », et vous pouvez voir en temps réel ce qu'elle fait.

Que peut-elle faire ?

L'extension offre à Claude 43 outils de navigation, couvrant presque tout ce qu'une personne peut faire avec une souris et un clavier :

  • Voir : lire le contenu de la page, prendre une capture d'écran, obtenir la structure d'un élément, capturer les données des requêtes réseau derrière la page.
  • Cliquer et remplir : cliquer sur des boutons/liens, remplir des champs de saisie, cocher des cases, faire des sélections dans des listes déroulantes, appuyer sur des touches (y compris les combinaisons Ctrl/Entrée, etc.), faire défiler, survoler, faire glisser.
  • Naviguer et sauter : ouvrir/fermer/changer d'onglet, revenir en arrière/avant, accéder à une URL, attendre le chargement d'un élément.
  • Transférer : envoyer une image (par exemple une couverture) via son URL directement dans le champ de téléchargement d'une page web, sans que les octets de l'image ne passent par la conversation.
  • Passer les CAPTCHA : identifier la position du trou dans un curseur, faire glisser le curseur, cliquer sur des CAPTCHA textuels ou d'images (détaillé ci-dessous).

Le point clé n'est pas « combien d'outils », mais vous n'avez pas besoin de les mémoriser. Vous parlez en langage naturel, Claude décompose cela en une série d'actions et les exécute. Ce qu'il peut faire pour vous, de manière abstraite :

  • confier en une phrase des opérations web répétitives et fastidieuses — remplir des formulaires, traitements par lots, transporter des informations entre pages ;
  • injecter en une fois du contenu préparé dans un éditeur web et le publier ;
  • gérer des processus nécessitant une connexion ou le passage d'un CAPTCHA.

C'est vous qui décidez sur quel site et quoi faire.

Point fort : comment fait-il glisser le CAPTCHA ?

C'est là que l'extension montre toute sa puissance, là où les scripts web classiques / scripts Greasemonkey ne peuvent pas.

D'abord, pourquoi l'automatisation classique ne passe pas les CAPTCHA. Le navigateur appose un « sceau de vérité » sur chaque événement, appelé isTrusted : un événement généré par une vraie personne avec la souris a isTrusted=true ; un clic créé par du code JavaScript (element.click(), dispatchEvent) a isTrusted=false. Les CAPTCHA et les systèmes anti-bot vérifient ce sceau, et les événements créés par script sont immédiatement repérés. C'est pourquoi les scripts Greasemonkey qui simulent des clics ne sont pas reconnus.

Cette extension emprunte une autre voie — le protocole de développement Chrome (CDP) injecte des événements d'entrée au niveau du noyau du navigateur, produisant des événements avec isTrusted=true, impossibles à distinguer pour l'anti-bot. C'est la base des outils de « saisie réelle » comme real_click, real_drag, real_type.

Mais être « vrai » ne suffit pas, il faut que le glissement ressemble à un humain. La trajectoire du glissement du curseur est calculée avec une courbe anthropomorphique spéciale, pas un simple déplacement en ligne droite instantané :

  • Vitesse variable : démarrage lent, accélération au milieu, ralentissement près de la cible (comme un humain qui fait glisser quelque chose), pas une vitesse constante ;
  • Courbe : légère convexité puis retour, simulant le fait qu'une main humaine ne suit jamais une ligne parfaitement droite ;
  • Tremblement : chaque pas ajoute une micro-oscillation aléatoire au niveau du pixel ;
  • Pauses : une courte pause au début (prise en main) et une autre avant de relâcher, avec des intervalles aléatoires en millisecondes entre chaque étape.

Où se trouve le trou est aussi détecté par l'extension : elle prend une capture du CAPTCHA, convertit l'image en niveaux de gris, calcule l'« énergie » des bords verticaux colonne par colonne — les deux bords verticaux de la pièce du puzzle et du trou ont la plus forte énergie, et on les apparie pour localiser le trou. Claude reçoit les coordonnées, calcule la distance à faire glisser, puis exécute le glissement avec la trajectoire anthropomorphique, prend une capture après coup pour vérifier, et ajuste si nécessaire.

  • Curseur puzzle : identifier le trou → faire glisser.
  • Curseur linéaire « glisser jusqu'à l'extrémité droite » : mesurer la poignée et l'extrémité droite de la piste → glisser jusqu'au bout.
  • CAPTCHA par clic sur texte/image : capture pour connaître l'ordre de clic demandé et la position de chaque mot → cliquer successivement selon les coordonnées.

Il y a aussi une difficulté cachée : de nombreux sites placent leurs formulaires de connexion et CAPTCHA dans des iframes inter-domaines, hors de portée des sélecteurs CSS des scripts classiques. Or, ces entrées réelles basées sur les coordonnées agissent au niveau du rendu, sans être limitées par la politique de même origine, elles peuvent opérer directement dans une iframe inter-domaines.

Comparaison en une phrase :

Script web classique / Greasemonkey Extension PandaNpc
Authenticité des événements isTrusted=false (artificiel) isTrusted=true (injecté au niveau noyau)
Détection anti-bot Repéré immédiatement Indétectable
Trajectoire de glissement Ligne droite instantanée Anthropomorphique : vitesse variable + courbe + tremblement
CAPTCHA dans iframe inter-domaines Inaccessible Accessible via coordonnées
Qui décide quoi cliquer/glisser Vous écrivez des règles fixes Claude analyse l'image et décide

Note : Le passage de CAPTCHA vise à vous aider à effectuer des opérations que vous êtes en droit de faire (comme vous connecter à votre propre compte), et non à casser ou attaquer en masse les sites d'autrui.

Sécurité : elle n'agit pas en cachette sans votre consentement

La plus grande crainte quand on laisse l'IA contrôler le navigateur est « pourrait-elle faire des bêtises dans mon dos ? ». L'extension met en place plusieurs barrières :

  • Chaque action doit être approuvée : avant que Claude ne clique ou ne remplisse, une carte apparaît dans le panneau latéral vous indiquant « Il veut faire quoi sur quelle page ». Vous pouvez Autoriser / Toujours autoriser (site + action) / Refuser.
  • Sites sensibles bloqués d'office : banques en ligne, paiement, messagerie, pages de connexion (ICBC / CCB / CMB, PayPal / Alipay / WeChat Pay, Gmail / QQ Mail / Outlook, connexion Google / Microsoft, etc.) sont tous dans une liste noire. Toute opération est refusée, sans même demander.
  • N'agit que sur l'onglet actif : elle ne fouille pas vos autres onglets ouverts en arrière-plan.
  • Interrupteur général « Pause » : à tout moment, appuyez pour arrêter toute automatisation.
  • Traçabilité : les 100 dernières actions (heure, page, action effectuée, succès/échec) sont enregistrées et consultables.
  • Multi-navigateurs isolés : si vous installez la même extension sur plusieurs navigateurs, les instructions de chaque session ne sont envoyées qu'au navigateur lié, pas de diffusion ni d'erreur.

En d'autres termes : ce qu'elle peut faire, c'est vous qui validez carte par carte ; ce qu'elle a fait, vous pouvez le consulter à tout moment.

Mise en route en trois étapes

  1. Installez l'extension : en un clic depuis le Chrome Web Store 👉 PandaNpc — Remote Control for Claude Code

  2. Appairez votre Claude Code : sur votre machine de développement, installez et exécutez pandapaw :

    bash
    # macOS / Linux
    curl -fsSL https://cos.pandanpc.com/pandapaw/install.sh | sh
    # Windows (PowerShell)
    iwr -useb https://cos.pandanpc.com/pandapaw/install.ps1 | iex

    Puis exécutez pandapaw qr pour générer un code d'appairage à usage unique valable deux minutes, collez-le dans le panneau latéral de l'extension et cliquez sur « Connecter ».

  3. Laissez-la travailler : ouvrez la page web sur laquelle vous voulez agir, parlez en langage naturel dans la conversation — « Remplis ce formulaire pour moi », « Connecte-toi, gère le CAPTCHA toi-même », « Publie ce contenu ». Elle s'occupe du reste, et une carte vous demande votre approbation si nécessaire.

Résumé

Le moment le plus utile de l'IA, ce n'est souvent pas quand elle pense à votre place, mais quand elle agit à votre place. Cette extension Chrome transforme Claude de « conseiller dans une boîte de dialogue » en « opérateur dans votre navigateur » : 43 outils, capable de passer des CAPTCHA de curseur et de clic, d'agir dans des iframes inter-domaines, avec un ensemble complet de sécurité : approbation, liste noire, pause et traçabilité.

Si vous voulez que l'IA vous aide vraiment dans vos tâches web, installez l'extension dès maintenant et connectez-la à votre Claude Code pour essayer.