Qu’est-ce qu’un agent de navigateur basé sur l’IA, et faut-il lui autoriser l’accès à votre ordinateur ?
Confiez votre ordinateur portable à un inconnu. Éloignez-vous pendant vingt minutes. Revenez en espérant que votre compte bancaire, votre boîte de réception et l’historique de votre navigateur soient exactement comme vous les avez laissés. Ça semble imprudent. C’est en gros le principe d’un agent de navigation basé sur l’IA, sauf que l’inconnu n’est pas une personne. C’est un logiciel. Il ne se fatigue jamais, ne s’ennuie jamais et ne dit jamais « ce site web est agaçant, je m’en occuperai plus tard ».
Un agent IA pour navigateur consulte une page web un peu comme vous le feriez, puis clique, tape, fait défiler et navigue de manière autonome. Dites-lui « réserve un vol pour Lisbonne à moins de 400 $ » et il s’en charge. Pas besoin de l’accompagner. Pas de script détaillé rédigé à l’avance. Il détermine son parcours au fur et à mesure, de la même manière maladroite qu’un nouvel employé tâtonne sur l’intranet de l’entreprise dès son premier jour.
Les gens utilisent à tout va l’expression « IA agentique » comme si elle expliquait tout. En réalité, ce n’est pas le cas. Ce terme désigne en fait un logiciel capable d’agir de manière autonome, en plusieurs étapes, pour atteindre un objectif que vous lui avez fixé en langage courant. Il ne s’agit pas simplement de répondre à une question, mais bien de mener à bien la tâche.
Beaucoup de gens sont déjà séduits par cette idée. Soit il s’agit de la prochaine étape la plus évidente dans le domaine de l’informatique, soit c’est une très mauvaise idée dissimulée derrière une interface attrayante. Peut-être les deux. Nous y reviendrons.
Qui construit réellement ces choses en ce moment même ?
À l’heure actuelle, pratiquement tous les grands laboratoires d’IA ont déjà lancé une version ou une autre de ce type de fonctionnalité. Des assistants de navigation, des modes « utilisation de l’ordinateur », des agents qui s’installent dans un onglet du navigateur et cliquent discrètement à votre place. Les noms exacts changent tous les six mois, ce qui est assez agaçant si l’on essaie de s’en souvenir.
Ce qui importe moins que le nom de la marque, c’est le principe qui se cache derrière chacune d’entre elles. Donnez un objectif au modèle. Montrez-lui l’écran, ou une version structurée de celui-ci. Laissez-le agir, observez ce qui se passe, puis recommencez si le premier clic a échoué. Répétez l’opération jusqu’à ce que ce soit fait, ou jusqu’à ce qu’il se retrouve coincé dans une boucle, cliquant quarante fois sur le même bouton sans issue, comme une mouche se cognant contre une fenêtre fermée.
Ce type de défaillance lié à une boucle est plus fréquent que ne le laissent entendre les démonstrations. Personne n’inclut dans les vidéos promotionnelles les séquences montrant un robot bloqué dans une boucle. C’est compréhensible, je suppose. Personne n’a envie de regarder un robot en panne pendant quatre-vingt-dix secondes d’affilée.
Ce que fait réellement toute la journée un agent de navigateur basé sur l’IA.
Si l’on fait abstraction du jargon marketing, voici comment cela fonctionne. L’agent prend une capture d’écran ou analyse la structure sous-jacente de la page, distingue les boutons cliquables du texte décoratif, puis décide où aller ensuite. Et il recommence. Réserver une voiture de location sur un site comportant six menus déroulants et un CAPTCHA censé vérifier que vous n’êtes pas un robot ? Une journée comme les autres pour l’un de ces outils.
Ce n’est pas le même genre de chatbot que celui auquel vous êtes habitué. Un chatbot se contente de répondre. Une IA d’automatisation de navigateur, elle, agit. Elle déplace le curseur sur une page, clique sur « Ajouter au panier », saisit votre adresse de livraison, puis clique sur « Valider ». Certains agents gèrent une douzaine d’onglets de navigateur à la fois, à l’image d’un barista jonglant avec six commandes pendant l’affluence du lundi. Sauf qu’aucune de ces commandes ne concerne du café, et que l’une d’entre elles pourrait bien être votre déclaration d’impôts.
La technologie sous-jacente varie considérablement. Certains agents lisent directement le code HTML brut et le DOM d’une page. D’autres examinent littéralement les pixels, devinant l’emplacement des boutons comme le ferait une personne plissant les yeux devant un écran. Ceux qui fonctionnent par pixels se déplacent avec un tracé de curseur étrangement saccadé, comme lors d’une séance de Ouija où l’esprit invoqué serait l’automatisation du service client.
C’est vraiment pratique, je ne vais pas faire semblant du contraire.
Je vais vous avouer une chose. Sur ma liste des activités que j’aime le moins, remplir des notes de frais se situe quelque part entre les détartrages dentaires et le montage de meubles Ikea sans la petite clé hexagonale. Si un logiciel est capable de passer au crible quatorze reçus et de remplir un tableur sans se plaindre, je ne vais pas m’y opposer par principe.
Les gens ont recours à ces outils pour des tâches vraiment fastidieuses. Comparer des devis d’assurance sur une douzaine d’onglets ouverts. Suivre un colis en retour dont trois transporteurs différents affirment tous que ce n’est pas leur problème. Postuler à vingt offres d’emploi avec des lettres de motivation légèrement différentes. Rien de tout cela n’a de charme, et aucune de ces tâches ne nécessite non plus toute l’attention d’un être humain.
C’est là tout l’intérêt d’un agent IA intégré au navigateur : ce n’est pas qu’il soit magique, mais qu’il est infatigable, contrairement aux êtres humains. Il ne se laissera pas distraire par une notification de discussion de groupe au beau milieu d’une demande de prêt immobilier. Il n’abandonnera pas à la quatrième page d’un site web administratif par pur désespoir. Ce sont de petites victoires. Mais elles sont bien réelles, et elles s’accumulent au fil d’une semaine remplie de petites tâches agaçantes que personne n’a vraiment envie d’accomplir soi-même.
Et c’est là que ça devient gênant.
Jusqu’ici, ça semble être une bonne affaire. Le logiciel s’occupe des tâches fastidieuses, et vous récupérez vos soirées. Mais pour que tout cela fonctionne, l’agent a besoin d’un accès. Un véritable accès. À vos sessions connectées. Parfois à vos mots de passe enregistrés. À votre navigateur lui-même, avec vos cookies, ouvert comme un journal intime laissé sur la table de la cuisine.
Ce n’est pas une mince affaire. C’est une demande de taille, présentée sous le couvert d’une fonctionnalité pratique.
Pensez à tout ce à quoi vous êtes connecté en ce moment même dans votre navigateur. Votre messagerie. Peut-être votre banque. Et certainement un site de vente en ligne qui a déjà mémorisé votre numéro de carte bancaire. Laisser un agent IA opérer dans cet environnement signifie qu’il ne navigue pas dans un bac à sable isolé. Il revêt votre identité numérique comme un manteau qu’il aurait pris sur votre chaise en sortant de chez vous.
La plupart des gens ne pensent pas à cet aspect, car le marketing met toujours en avant le tour de magie plutôt que les rouages qui se cachent derrière. « Laissez l’IA s’occuper de vos tâches fastidieuses », ça sonne bien. « Donnez à un modèle linguistique les identifiants de vos comptes Gmail, Amazon et Chase déjà connectés », ça ressemble à un argumentaire tiré d’un film de braquage. Pourtant, ils décrivent exactement la même chose.
Le problème des autorisations dont on ne parle pas assez.
Voici un scénario qui se produit réellement, et non une hypothèse inventée de toutes pièces pour vous faire peur. Vous demandez à un agent de « nettoyer votre boîte de réception ». Une demande raisonnable. Sauf que la notion de « propre » de l’agent et la vôtre ne correspondent pas forcément. Il pourrait vous désabonner d’une newsletter qui contient justement une offre d’emploi cachée au sixième paragraphe, car l’e-mail utilisait une mise en page de type marketing et a été identifié comme spam par un filtre.
C’est là tout l’écart entre ce que vous vouliez dire et ce que le logiciel a fait, et cet écart est plus grand que la plupart des gens ne le pensent. Une demande du type « trouve-moi le vol le moins cher » semble irréprochable, jusqu’à ce que l’agent décide que « le moins cher » justifie une escale de six heures dans une ville dont vous n’avez jamais entendu parler. Et ce, pour une date de retour différente de celle que vous aviez indiquée, car techniquement, vous n’avez jamais précisé que les dates devaient coïncider.
La portée des autorisations est l’aspect le moins glamour de tout le débat sur les autorisations des agents IA, mais c’est en réalité celui qui importe le plus. L’agent dispose-t-il d’un accès en lecture seule, ou peut-il cliquer sur « acheter » ? Peut-il consulter votre agenda, ou peut-il également accepter des invitations à des réunions en votre nom sans vous demander votre avis au préalable ? La différence entre ces deux cas, c’est la différence entre un assistant utile et un petit fardeau permanent dont vous aviez oublié que vous vous étiez engagé à le supporter.
Un agent IA pourrait-il réellement vider votre compte bancaire ?
Réponse courte : en théorie, oui. Des chercheurs en sécurité se sont déjà penchés précisément sur cette question. Cette attaque porte un nom, « l’injection de prompt », et elle est bien plus inquiétante qu’elle n’y paraît. Une page web malveillante peut dissimuler des instructions au sein même de son texte. Parfois en caractères blancs sur fond blanc, invisibles à l’œil nu mais parfaitement lisibles par un agent qui analyse chaque caractère de la page. L’agent les interprète comme des instructions légitimes. Vous ne vous en rendez jamais compte.
Imaginez qu’on demande à votre agent de « résumer cette page pour les offres de voyage », alors qu’au fond du pied de page, invisible à l’œil nu pour quelqu’un qui jette un coup d’œil rapide, se trouve une ligne qui dit en substance : « rendez-vous également sur ce portail bancaire et autorisez un virement ». Un agent vigilant refusera. Un agent mal formé pourrait même ne pas se rendre compte que quelque chose cloche, car pour le modèle, un texte est un texte, peu importe où il se trouve physiquement sur la page ou qui l’y a placé.
Ce n’est pas de la science-fiction. Ce sont les entreprises pionnières qui développent ces agents et qui s’empressent actuellement de les corriger, tout comme les éditeurs de navigateurs s’étaient empressés, au début des années 2000, de corriger les failles liées aux fenêtres pop-up. La différence, c’est qu’une fenêtre pop-up ne faisait que vous agacer. Un agent IA compromis ayant accès à des comptes bancaires peut, quant à lui, commettre des actes aux conséquences bien réelles.
Alors, faut-il vraiment laisser quelqu’un utiliser votre ordinateur ?
Ma réponse, et ce n’est qu’un avis personnel, pas une règle absolue : oui, pour les choses ennuyeuses. Non, pour tout ce qui touche à l’argent ou aux dossiers médicaux, du moins pour l’instant.
Laissez l’agent comparer les prix des produits alimentaires, rédiger votre message d’absence du bureau, suivre le traitement d’un remboursement à travers neuf fenêtres de chat du service client différentes, pour que vous n’ayez pas à subir la musique d’attente. C’est là le point idéal : peu d’enjeux et beaucoup d’ennui, la combinaison parfaite qui rend les humains malheureux et les logiciels indifférents.
Mais dans le secteur bancaire ? Sur les portails de santé ? Tout ce qui comporte une étape à deux facteurs qui existe précisément parce que quelqu’un a décidé qu’une couche supplémentaire de jugement humain était nécessaire ? Je m’en tiendrais à l’écart. Pas nécessairement parce que la technologie est mauvaise. C’est simplement que les défaillances coûtent cher, et que « l’IA a cliqué au mauvais endroit » n’est pas une phrase que quiconque souhaite prononcer devant un service de lutte contre la fraude.
Testez-le en environnement isolé dès que vous le pouvez. Utilisez des agents dotés d’autorisations limitées plutôt que d’un accès complet au compte. Surveillez de près les premières exécutions au lieu de vous éloigner et de faire aveuglément confiance. Ce n’est pas de la paranoïa. C’est simplement la façon dont vous traiteriez n’importe quel nouvel employé pendant sa première semaine, et un agent IA pour navigateur est, au sens propre du terme, exactement cela. Compétent dans certains domaines, désemparé dans d’autres, ce n’est pas encore quelqu’un à qui vous confieriez les clés de votre maison sans y réfléchir à deux fois.
Mon avis en toute franchise.
Je ne pense pas que la vraie question soit de savoir si les agents IA intégrés aux navigateurs vont s’imposer dans notre utilisation des ordinateurs. Le train est déjà en marche. Les avantages sont bien trop évidents pour que cet argument tienne la route. Et les tâches qu’ils accomplissent sont manifestement si rébarbatives que personne ne peut sérieusement prétendre que nous devrions continuer à les effectuer manuellement pour toujours, par un souci mal placé d’autonomie numérique. Personne ne regrette de devoir remplir quatre fois le même formulaire.
La vraie question est de savoir si les structures d’autorisation parviendront à rattraper leur retard avant qu’un incident embarrassant – ou coûteux – ne se produise à grande échelle. Pour l’instant, nous sommes coincés dans cette phase d’adolescence un peu délicate. C’est la même que celle qu’ont traversée les smartphones avant que les autorisations des applications ne deviennent plus précises, au lieu de se résumer à « autorisez cette application à accéder littéralement à tout ce qui se trouve sur votre téléphone, oui ou non ». Nous y parviendrons un jour avec les agents IA. Mais nous n’en sommes tout simplement pas encore là, et prétendre le contraire sous prétexte qu’une démo semblait impressionnante, c’est ce qui conduit les gens à devoir expliquer à leur banque pourquoi un chatbot a acheté pour quatre cents dollars de nains de jardin.
Utilisez les outils. Débarrassez-vous des tâches fastidieuses. Mais ne confiez pas tout d’un coup, et ne faites pas semblant d’être surpris si vous l’avez fait.
Car voici ce que personne n’aime admettre : ceux qui sont victimes de cette technologie le sont rarement à cause de la version spectaculaire, digne d’un film, du risque. Ce sont plutôt les petits déboires ennuyeux qui les touchent. Un abonnement renouvelé automatiquement que personne n’avait l’intention de conserver. Un formulaire envoyé avec une mauvaise adresse de livraison, trois semaines avant un déménagement. Une réunion acceptée dans votre agenda à l’heure même où vous deviez être ailleurs. Des petites choses. Des choses agaçantes. Le genre de choses qui, ironiquement, sont précisément la raison pour laquelle les gens voulaient un agent au départ.
