Validateur robots.txt et sitemap en ligne

Le validateur robots.txt et sitemap vérifie les deux fichiers que les moteurs de recherche lisent avant tout le reste sur votre site. L'outil télécharge le robots.txt, contrôle chaque directive ligne par ligne et met en évidence les erreurs qui vous coûtent silencieusement de l'indexation : un "Disallow: /" involontaire, une réponse 5xx (tant que le robots.txt renvoie une erreur serveur, Google suspend l'exploration de tout le site), des règles écrites avant le premier User-agent. Il suit ensuite les déclarations Sitemap: jusqu'aux sitemaps eux-mêmes.

Chaque sitemap est vérifié, y compris tous les fichiers listés dans un index de sitemaps : XML bien formé, espace de noms correct, nombre d'entrées et limites de taille. Chaque balise est expliquée séparément — lesquelles sont obligatoires, lesquelles influencent réellement l'exploration et lesquelles (comme priority et changefreq) Google et Yandex déclarent ignorer, vous pouvez donc les supprimer sans risque. Les premières URL du sitemap sont réellement interrogées, si bien qu'un sitemap rempli de 404 ou de redirections ne passe pas inaperçu.