Vérificateur de règles robots.txt contre une URL
Dit si un robot donné peut explorer une URL, et quelle règle du fichier collé l’emporte.
Tout se calcule dans votre navigateur : rien de ce que vous saisissez n’est envoyé.
Résultat
Le résultat de l’exemple s’affiche ici dès que la page a fini de charger.
- Groupe retenu
- Règle gagnante
- Pourquoi
Les textes que l’outil applique
- RFC 9309 — Robots Exclusion Protocol : le choix du groupe
(§ 2.2.1), la règle la plus spécifique et la préférence pour
Allowà égalité (§ 2.2.2), les caractères*et$(§ 2.2.3). - Google — How Google interprets the robots.txt specification : la longueur comptée sur le chemin de la règle, les exemples de jokers et de priorité que l’outil reproduit, les lignes ignorées, la limite de 500 kibioctets. Ne vaut que pour les robots de Google.
- Google — List of Google’s common crawlers : certains robots répondent à plusieurs jetons.
Pages ouvertes le 20 novembre 2026. Là où la RFC se tait — la façon de compter un joker dans la longueur d’une règle —, l’outil suit les exemples de Google et le signale dans son résultat.
Ce que l’outil ne fait pas
Ne télécharge rien : le fichier doit être collé. Applique la RFC 9309 et les caractères * et $ ; un robot peut s’en écarter.
La règle appliquée, expliquée
Les autres outils
- Générateur de robots.txt pour les robots d’IA
- Intervalle de confiance d’un taux de citation
- Calculateur de taille de corpus
- Calculateur de part de citations
- Contrôle du title et de la meta description
- Générateur de balises hreflang
- Constructeur de JSON-LD Organization
- Décompte des robots d’IA dans un extrait de journaux
- Contrôle d’un plan de redirection
- Générateur de balise robots et de contrôles d’extrait
- Contrôle d’un sitemap XML
Au-delà de l’outil
Et sur l’ensemble de votre site ?
Un outil répond sur un cas. Pour le site entier, décrivez votre situation : nous répondons par écrit, avec ce qu’il faudrait regarder d’abord.
Vous recevez un premier avis écrit et le prix du diagnostic.
4,9/5 sur 34 avis Google. Réponse écrite, sans relance commerciale. Vos données ne servent qu’à vous répondre.