Outil SEO gratuit

Vérificateur de robots.txt et des robots IA

Collez votre fichier robots.txt pour vérifier l’accès à la page d’accueil pour les principaux robots de recherche et d’IA. L’analyse des règles s’effectue localement dans votre navigateur.

robots.txt donne des consignes aux robots qui les respectent ; ce n’est pas un contrôle d’accès. Le pare-feu ou le CDN peut toujours bloquer les robots. Google-Extended suit les règles de robots.txt, mais ne récupère pas les pages avec son propre user-agent.

Pourquoi vérifier les robots IA ?

Les robots de recherche peuvent aider à faire apparaître votre contenu dans les réponses, tandis que les robots d’entraînement collectent des données pour développer des modèles. Choisissez les accès que vous souhaitez autoriser. Les règles d’un robot ne s’appliquent pas nécessairement aux autres.

Questions fréquentes

L’outil vérifie-t-il mon site en ligne ?

Non. Il analyse le texte collé pour la page d’accueil uniquement. Consultez /robots.txt sur votre site pour vérifier que le contenu correspond.

Bloquer un robot retire-t-il ma page des résultats ?

Pas nécessairement. Une URL bloquée peut rester indexée grâce aux liens. Pour demander son retrait, utilisez noindex sur une page accessible et consultez la documentation du moteur.

Outils et guides associés