Google · Exploration pour un moteur
Storebot-Google
Ce qu’il fait
Storebot-Google, que Google appelle Google StoreBot, explore les sites marchands pour Google Shopping : fiches produit, panier, tunnel de commande. Les règles adressées à son jeton touchent toutes les surfaces de Google Shopping, dont l’onglet Shopping de la recherche. Il obéit à robots.txt et n’a qu’un jeton, le sien.
- Jeton
robots.txt Storebot-Google- Obéit à
robots.txt - Oui, d’après son éditeur
- Signature
Mozilla/5.0 (X11; Linux x86_64; Storebot-Google/1.0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/W.X.Y.Z Safari/537.36- Le reconnaître
- Google le range parmi ses robots communs : recherche DNS inversée vers un nom de la forme
crawl-66-249-66-1.googlebot.com, confirmée par une recherche directe qui redonne l’adresse, ou comparaison de l’adresse aux plages de common-crawlers.json. - Pour le refuser
User-agent: Storebot-Google Disallow: /
Un robot qui va jusqu’à la page de commande
L’aide de Google Merchant Center décrit son parcours : il visite les fiches produit, les pages de panier et les pages de commande, et tente de suivre le tunnel d’achat en entier, en remplissant les formulaires avec des données comme une adresse de livraison. Il en relève le prix du produit, les frais et les délais de livraison, la disponibilité, la validité des codes de réduction, les moyens de paiement. Google dit s’en servir pour vérifier ce que le marchand déclare dans Merchant Center.
Ce que le marchand fournit prime : d’après la même aide, les données structurées de la page et les informations saisies dans Merchant Center l’emportent sur ce que le robot extrait.
Ce qu’un refus touche : Google Shopping, pas la recherche
Les préférences adressées à Storebot-Google touchent toutes les surfaces de Google Shopping, l’onglet Shopping de la recherche compris. L’exploration pour la recherche elle-même dépend de Googlebot. À la différence de Googlebot-Image ou de Googlebot-News, ce robot n’a pas Googlebot pour second jeton : une règle écrite pour Googlebot ne le concerne pas. Il suit en revanche le groupe général User-agent: * quand aucun groupe ne le nomme ; c’est l’un des exemples que donne Google.
L’aide de Merchant Center encourage vivement à le laisser passer, et n’évoque le blocage que pour un site sans compte Merchant Center.
Dans les journaux
Deux signatures, ordinateur et mobile, contiennent Storebot-Google/1.0 ; Chrome/W.X.Y.Z y remplace un numéro de version qui change. L’aide de Merchant Center signale un autre indice : un client dont le prénom est « Google » et le nom « StoreBot », qui avance dans la commande sans acheter. Le rapport « Statistiques sur l’exploration » de Search Console lui réserve un type, StoreBot.
Son activité pèse dans la capacité d’exploration commune : Google écrit que la demande de Google Shopping monte avec les produits présents dans les flux marchands, et que la limite de capacité est partagée entre tous ses robots.
Le sujet, traité en entier
Sources
- Google — List of Google’s common crawlers Chaînes d’agent utilisateur ordinateur et mobile, jeton unique, surfaces de Google Shopping touchées. Ouverte le 20 novembre 2026.
- Aide Google Merchant Center — About the Google StoreBot crawler Pages visitées, informations relevées, usage par Google, priorité des données fournies par le marchand, indice du client « Google StoreBot ». Lue en anglais le 20 novembre 2026.
- Google — How Google interprets the robots.txt specification Exemple de choix du groupe : sans groupe à son nom, Storebot-Google suit le groupe général. Ouverte le 20 novembre 2026.
- Google — Optimize your crawl budget Demande d’exploration propre à chaque robot, dont Google Shopping ; limite de capacité partagée entre tous les robots. Source du lexique, rouverte le 20 novembre 2026.
- Aide Search Console — Crawl Stats report Type « StoreBot » du rapport. Lue en anglais le 20 novembre 2026.
- Google — Verify requests from Google crawlers and fetchers Recherche DNS inversée puis directe, fichier de plages des robots communs. Ouverte le 20 novembre 2026.
Page revue le