Bloquez-vous les bots IA que vous voulez ? Le robots.txt des boutiques

Le problème le plus fréquent que nous voyons lors des checks de visibilité IA n'est pas une mauvaise fiche produit. C'est une boutique qui bloque précisément les bots qui la recommanderaient — généralement par accident, souvent à cause d'une règle « bloquer l'IA » bien intentionnée, copiée depuis un article de blog.

Deux familles de bots d'IA

C'est la distinction qui change tout :

Les bots d'entraînement collectent des données pour entraîner les futurs modèles. Les bloquer est un choix légitime : cela détermine si votre contenu finit dans le jeu d'entraînement d'un modèle, pas si l'assistant peut vous trouver aujourd'hui.

• GPTBot (entraînement OpenAI)
• ClaudeBot (entraînement Anthropic)
• Google-Extended (opt-out de l'entraînement IA de Google)
• CCBot, Bytespider, Meta-ExternalAgent

Les bots de recherche / de réponse récupèrent les pages au moment de la question pour répondre à un utilisateur. Bloquez-les, et l'assistant ne peut littéralement pas voir votre boutique quand quelqu'un pose la question.

• OAI-SearchBot et ChatGPT-User (recherche et navigation ChatGPT)
• PerplexityBot et Perplexity-User
• Claude-SearchBot et Claude-User
• Googlebot (alimente aussi les AI Overviews et le mode IA) et Bingbot (la recherche ChatGPT s'appuie sur l'index de Bing)

Une règle comme User-agent: GPTBot / Disallow: / ne bloque pas la recherche ChatGPT. Une règle qui bloque OAI-SearchBot, si. Beaucoup de boutiques ont la seconde sans le savoir.

La correction en trois lignes

Si vous voulez être recommandable, assurez-vous que les bots de réponse sont explicitement autorisés. Vous pouvez toujours bloquer les bots d'entraînement si telle est votre politique :

User-agent: OAI-SearchBot
Allow: /

User-agent: PerplexityBot
Allow: /

User-agent: Claude-SearchBot
Allow: /

# Optional: opt out of training only
User-agent: GPTBot
Disallow: /

Le problème du pare-feu dont personne ne parle

Votre robots.txt peut être parfait et les bots d'IA rester bloqués — par Cloudflare ou un autre WAF qui affiche un défi « vérification de votre navigateur » à tout ce qui n'est pas un navigateur ordinaire. Du point de vue du bot, votre boutique est une page vide. Le check NIMSEO le teste en récupérant votre page d'accueil en se présentant comme chaque bot, puis en comparant ce qui revient.

Sur Salla, Zid et Shopify

Shopify vous permet de modifier robots.txt.liquid depuis l'éditeur de code du thème. Sur Salla et Zid, le robots.txt est géré par la plateforme : vérifiez son contenu (ouvrez yourstore.com/robots.txt) et, si un bot de réponse est bloqué, signalez-le au support de la plateforme — c'est un réglage au niveau de la plateforme, pas quelque chose à contourner.

Lancez le check gratuit. Si G1 ou G2 est au rouge, cet article est votre correctif.