Aller au contenu
ToolFarmToolFarm
SEO

Robots.txt Checker

Vérifiez votre robots.txt dans le navigateur. Obtenez une note de 0 à 100, testez n'importe quelle URL avec Googlebot, Bingbot et plus, et voyez les corrections ligne par ligne. Sans téléversement ni inscription.

4 min de lecture

Saisissez l'URL d'un site ou collez votre robots.txt pour commencer.

À quoi sert cet outil

Collez votre robots.txt ou chargez-le depuis l'URL d'un site et obtenez aussitôt une analyse notée, directement dans votre navigateur, sans inscription et sans rien téléverser. Ce vérificateur de robots.txt sert à la fois de validateur et de testeur: il analyse chaque directive, signale les erreurs de syntaxe ligne par ligne et vous laisse tester n'importe quel chemin avec Googlebot, Bingbot et d'autres robots pour voir s'il est autorisé ou bloqué. Vous obtenez aussi des contrôles de la directive Sitemap et des corrections en langage clair. La Search Console reste l'endroit pour voir le fichier exact que Google a mis en cache ou pour demander une nouvelle exploration. Ici, vous avez le deuxième avis rapide et noté, et un rappel clair: le robots.txt contrôle l'exploration, pas l'indexation, donc il ne peut pas appliquer un noindex à une page ni rien cacher.

À quoi ça vous sert

  • Vérifiez si votre robots.txt bloque par erreur Google sur des pages importantes avant que cela ne vous coûte du trafic.
  • Validez la syntaxe d'un nouveau robots.txt et repérez les règles placées dans le mauvais groupe ou avant tout User-agent.
  • Testez un chemin précis, comme /blog ou /wp-admin, avec Googlebot, Bingbot, GPTBot ou un robot personnalisé pour voir s'il est autorisé ou bloqué.
  • Confirmez que vous avez déclaré au moins une directive Sitemap absolue pour que les moteurs découvrent vos URL.
  • Remettez à un client un rapport clair et noté qui explique chaque problème du robots.txt en langage simple.

Comment l'utiliser

  1. Collez le contenu de votre robots.txt, ou saisissez l'URL d'un site et nous essaierons de lire son robots.txt depuis votre navigateur.
  2. Si le navigateur bloque la lecture de l'URL (CORS), ouvrez le fichier à l'adresse https://votresite.com/robots.txt, copiez-le et collez-le ici. Toutes les vérifications restent locales.
  3. Lisez la note de 0 à 100 et les contrôles regroupés par structure, explorabilité, sitemaps et hygiène, chacun avec sa ligne et sa correction.
  4. Utilisez le testeur d'URL pour vérifier n'importe quel chemin avec Googlebot, Bingbot ou un robot personnalisé et voir quelle règle correspond.
  5. Copiez ou téléchargez le rapport pour partager les résultats ou les garder pour plus tard.

Tout le travail se passe dans votre navigateur. Aucun fichier n'est envoyé à un serveur. Voir plus d'outils dans le même champ.

SEO

Questions fréquentes

Le robots.txt empêche-t-il une page d'apparaître dans Google?

Non. Le robots.txt contrôle l'exploration, pas l'indexation. Une page que vous bloquez peut quand même être indexée si d'autres pages pointent vers elle. Pour la garder hors des résultats, utilisez une balise ou un en-tête noindex et laissez la page explorable.

Pourquoi la lecture de l'URL a-t-elle échoué quand j'ai saisi l'adresse de mon site?

Les navigateurs bloquent les lectures entre domaines pour des raisons de sécurité (CORS), donc lire le robots.txt d'un autre site directement depuis votre navigateur échoue souvent même quand le fichier est correct. Collez le contenu et toutes les vérifications se font en local.

Est-il prudent de lister des chemins privés ou d'administration dans le robots.txt?

Non. Le robots.txt est public et seulement indicatif. Lister un chemin secret indique à tout le monde qu'il existe et ne le protège pas. Utilisez une vraie authentification ou un noindex, et gardez les chemins sensibles hors du fichier.

Que fait Disallow: / et pourquoi le vérificateur m'avertit-il?

Disallow: / pour User-agent: * empêche les robots d'accéder à tout votre site. C'est adapté à un site de préproduction ou privé, mais sur un site en production cela peut vous retirer des résultats, c'est pourquoi le vérificateur le signale comme problème critique.

Comment ajouter un sitemap au robots.txt?

Ajoutez une ligne comme Sitemap: https://example.com/sitemap.xml avec une URL absolue. Vous pouvez en mettre plusieurs. La directive Sitemap aide les robots à découvrir vos pages, et le vérificateur avertit quand aucun sitemap n'est déclaré.

Comment savoir si le robots.txt bloque Googlebot?

Collez le fichier et utilisez le testeur d'URL: saisissez un chemin et choisissez Googlebot. Le vérificateur indique s'il est autorisé ou bloqué et quelle règle correspond. Évitez de bloquer largement les chemins CSS, JS ou images, car cela peut empêcher Googlebot d'afficher vos pages.