robots.txt bloque tout le site
Réponse courte
"Disallow: /" empêche Google d'explorer chaque page. Souvent, cette ligne reste d'une phase de développement. Pour corriger : supprimez "Disallow: /" des règles pour Googlebot et pour User-agent: *.
Par l'équipe SmooxSEO. Mis à jour le 16 novembre 2026.
Ce que cela signifie et pourquoi c'est important
"Disallow: /" empêche Google d'explorer chaque page. Souvent, cette ligne reste d'une phase de développement.
Comment corriger
Supprimez "Disallow: /" des règles pour Googlebot et pour User-agent: *.
Causes fréquentes
- Un "Disallow: /" laissé dans robots.txt pendant le développement.
- Un réglage du CMS ou une extension qui génère un robots.txt bloquant.
- Un robots.txt copié depuis un serveur de préproduction lors du déploiement.
Comment le repérer
Ouvrez yourdomain.com/robots.txt : "User-agent: *" suivi de "Disallow: /" bloque tout. Le rapport robots.txt de Search Console indique ce que Google a lu. SmooxSEO lit votre robots.txt et teste vos pages par rapport à celui-ci.
Exemple
User-agent: *
Disallow: /User-agent: *
Disallow: /admin/
Sitemap: https://example.com/sitemap.xmlErreurs à éviter
- Penser que robots.txt retire des pages de Google : il empêche l'exploration, pas l'indexation. Utilisez noindex pour exclure une page.
- Bloquer le site pendant la « préparation du lancement » et oublier de rétablir l'accès ensuite.
Corriger selon votre plateforme
- WordPress
- Désactivez Réglages > Lecture > « Demander aux moteurs de recherche de ne pas indexer ce site », puis vérifiez la présence d'un fichier robots.txt physique ou de l'éditeur robots.txt d'une extension SEO.
- Shopify
- Shopify génère robots.txt ; un modèle robots.txt.liquid dans votre thème peut le remplacer. Supprimez tout Disallow: / que vous y avez ajouté.
Questions fréquentes
Combien de temps Google met-il à prendre en compte un robots.txt corrigé ?
Google actualise généralement robots.txt dans la journée. Dans le rapport robots.txt de Search Console, vous pouvez lui demander de récupérer à nouveau le fichier.
Quelle est la gravité ?
Le site, ou ses pages clés, peuvent disparaître de Google ou ne sont pas accessibles. Corrigez-les en priorité.
À propos des vérifications : Robots.txt
Le fichier robots.txt indique aux robots d'exploration les parties du site qu'ils peuvent visiter. Une règle erronée peut masquer tout un site aux moteurs de recherche.
Trouver ce problème sur votre site
SmooxSEO vérifie l'ensemble de votre site pour ce problème et 311 autres, liste les détails et vous dit quoi corriger en premier.