Vérificateur de fichiers Robots.txt
Entrez l'URL de votre site Web et découvrez immédiatement si votre robots.txt est correctement configuré et n'empêche pas les moteurs de recherche d'explorer vos pages les plus importantes.
Ce que l’outil vérifie
- Existence et accessibilité du fichier robots.txt
- Règles d'autorisation/interdiction et quelles sections sont bloquées
- Autorisations d'accès pour les principaux robots d'exploration (Googlebot, Bingbot et autres)
- Référence du plan de site XML dans robots.txt
- Erreurs courantes : blocage accidentel de l'intégralité du site ou des fichiers CSS/JS
Pourquoi c’est important
Robots.txt est le premier fichier qu'un moteur de recherche récupère lorsqu'il visite votre site. Une seule mauvaise règle – « Interdire : / » – peut effacer l’intégralité de votre site de l’index du jour au lendemain. L'absence d'une référence de plan de site ralentit la découverte de nouvelles pages. Obtenir le bon fichier robots.txt protège votre budget d'exploration et permet aux robots de se concentrer sur les pages qui comptent.
Guide détaillé dans le centre d’aideQuestions fréquentes
Qu'est-ce que robots.txt ?
Un fichier en texte brut placé à la racine de votre site Web (par exemple, example.com/robots.txt) qui indique aux robots des moteurs de recherche quelles parties de votre site ils sont autorisés ou non à visiter.
Le fichier robots.txt peut-il désindexer mon site par Google ?
Oui. Une règle « Interdire : / » bloque l'exploration de l'intégralité de votre site. Les pages qui ne peuvent pas être explorées seront généralement supprimées de l'index ou cesseront d'être mises à jour.
Le fichier robots.txt doit-il inclure un plan du site ?
Ce n’est pas obligatoire, mais fortement recommandé. L'ajout de « Plan du site : https://example.com/sitemap.xml" aide les moteurs de recherche à découvrir toutes vos pages plus rapidement.
Évaluez cet outil
Outils liés
Vous voulez une analyse SEO + GEO complète de votre site ?
Lancez les 19 vérifications d’un coup, suivez les positions sur Google et Seznam et obtenez des suggestions d’amélioration.
Lancer l’analyse complète