Des robots d'IA bloqués par un pare-feu

MoyennePriorité moyenne, catégorie Recherche IA, vérifié une fois pour tout le site

Réponse courte

Lorsqu'ils se présentent sous leur vrai nom, ces robots reçoivent une erreur ou une page de vérification, alors qu'un navigateur classique accède au site. Il s'agit souvent du réglage « Block AI bots » de Cloudflare ou d'une règle de protection contre les robots. Test effectué depuis le serveur de Smoox : les vrais robots viennent de leurs propres adresses, c'est donc un indice fort. Pour corriger : dans Cloudflare (Security > Bots) ou dans votre pare-feu, autorisez les robots de recherche IA par lesquels vous souhaitez être cité. Les robots d'entraînement peuvent rester bloqués.

Par l'équipe SmooxSEO. Mis à jour le 16 novembre 2026.

Ce que cela signifie et pourquoi c'est important

Lorsqu'ils se présentent sous leur vrai nom, ces robots reçoivent une erreur ou une page de vérification, alors qu'un navigateur classique accède au site. Il s'agit souvent du réglage « Block AI bots » de Cloudflare ou d'une règle de protection contre les robots. Test effectué depuis le serveur de Smoox : les vrais robots viennent de leurs propres adresses, c'est donc un indice fort.

Comment corriger

Dans Cloudflare (Security > Bots) ou dans votre pare-feu, autorisez les robots de recherche IA par lesquels vous souhaitez être cité. Les robots d'entraînement peuvent rester bloqués.

Causes fréquentes

  • Un mode « bot fight » du CDN ou du pare-feu qui bloque ou met à l'épreuve les user agents inconnus.
  • Des limites de débit qui arrêtent les robots d'exploration après quelques requêtes.
  • Un CAPTCHA ou un défi JavaScript affiché à tous les visiteurs qui ne sont pas des navigateurs.

Comment le repérer

Le fichier robots.txt peut autoriser les robots d'IA alors que votre pare-feu continue de les bloquer. Vérifiez les réglages de protection contre les robots dans votre CDN ou pare-feu, ainsi que leurs journaux, à la recherche des user agents d'IA bloqués. SmooxSEO envoie de vraies requêtes avec le user agent de chaque robot d'IA et compare les réponses avec celles d'un navigateur classique.

Erreurs à éviter

  • Autoriser les robots dans robots.txt et supposer qu'ils accèdent au site : le pare-feu décide en premier.
  • Autoriser les user agents uniquement par leur nom : certains pare-feu vérifient aussi les plages d'adresses IP des robots, que les fournisseurs d'IA publient.

Quelle est la gravité ?

La page se positionne toujours, mais moins bien, ou une véritable opportunité est perdue. Corrigez-la quand vous le pouvez.

À propos des vérifications : Recherche IA

Permet de savoir si les assistants IA (ChatGPT, Claude, Perplexity, Gemini, Copilot) peuvent lire et citer votre site : accès des robots IA, llms.txt et contenu prêt à répondre.

Trouver ce problème sur votre site

SmooxSEO vérifie l'ensemble de votre site pour ce problème et 311 autres, liste les détails et vous dit quoi corriger en premier.

Autres vérifications : Recherche IA

Toutes les vérifications