Google · Récupération à la demande
Google-Agent
Ce qu’il fait
Google-Agent est l’agent utilisateur des agents hébergés sur l’infrastructure de Google qui naviguent sur le web et y accomplissent des actions à la demande d’un utilisateur. Google le classe parmi ses récupérateurs déclenchés par l’utilisateur, qui ignorent en général robots.txt, et ne lui attribue aucun jeton.
- Jeton
robots.txt - Aucun : l’éditeur ne lui en liste pas.
- Obéit à
robots.txt - Non, d’après son éditeur
- Signature
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko; compatible; Google-Agent; +https://developers.google.com/crawling/docs/crawlers-fetchers/google-agent) Chrome/W.X.Y.Z Safari/537.36- Le reconnaître
- Google désigne un fichier pour lui : comparer l’adresse IP aux plages de user-triggered-agents.json. La recherche DNS inversée, confirmée par une recherche directe, reste la méthode manuelle. En complément, à titre expérimental, une partie de ses requêtes est signée selon Web Bot Auth sous l’identité
https://agent.bot.goog; Google précise que toutes ne le sont pas et qu’il faut garder la vérification par adresse.
Un agent qui agit, pas un robot qui explore
Google le décrit en une phrase : Google-Agent est employé par des agents hébergés sur son infrastructure pour naviguer sur le web et accomplir des actions à la demande d’un utilisateur. La page ne nomme aucun produit. Il figure dans la liste des récupérateurs déclenchés par l’utilisateur, à côté de la vérification de site ou de la lecture à voix haute, et non parmi les robots d’exploration.
Le fichier robots.txt ne le règle pas
Google n’attribue aucun jeton à Google-Agent : la liste donne ses signatures et ses adresses, pas de ligne User-agent à écrire. La règle de la famille est énoncée en tête de page : parce que la récupération a été demandée par un utilisateur, ces récupérateurs ignorent en général les règles de robots.txt. Un Disallow, même écrit à son nom, n’est donc pas un refus sur lequel compter.
Qui veut l’écarter le fait au niveau du serveur ou du pare-feu, d’après la signature et les adresses publiées. Ce choix ne touche ni l’exploration de Googlebot ni la recherche : il empêche un agent d’ouvrir la page, ou d’y agir, pour le compte de la personne qui le lui a demandé. Ce que cette personne voit alors n’est pas documenté.
Signature, adresses et Web Bot Auth
Deux chaînes d’agent utilisateur, mobile et ordinateur, contiennent Google-Agent et renvoient à sa documentation ; Chrome/W.X.Y.Z y remplace un numéro de version. La version mobile reprend l’habillage de téléphone de Googlebot Smartphone : le filtre se pose sur le nom, pas sur l’appareil.
Google expérimente en plus Web Bot Auth, un protocole encore à l’état de brouillon à l’IETF, par lequel l’agent signe ses requêtes. Une partie de celles de Google-Agent portent un en-tête Signature-Agent qui désigne https://agent.bot.goog, et les clés publiques se lisent à l’adresse https://agent.bot.goog/.well-known/http-message-signatures-directory. Google prévient qu’il ne signe pas toutes les requêtes : la vérification par adresse IP reste le recours.
Le sujet, traité en entier
Sources
- Google — List of Google user-triggered fetchers Entrée Google-Agent : chaînes d’agent utilisateur, usage, fichier user-triggered-agents.json, note sur Web Bot Auth ; règle générale sur robots.txt en tête de page ; aucun jeton listé. Ouverte le 20 novembre 2026 ; l’adresse /google-agent citée dans la signature y redirige.
- Google — Authenticate requests with Web Bot Auth (experimental) Statut expérimental, identité https://agent.bot.goog, en-tête Signature-Agent, répertoire de clés, requêtes non toutes signées. Ouverte le 20 novembre 2026.
- Google — Verify requests from Google crawlers and fetchers Méthode manuelle par DNS et fichiers de plages des récupérateurs déclenchés par l’utilisateur, dont user-triggered-agents.json. Ouverte le 20 novembre 2026.
Page revue le