> ## Content Index > Fetch the complete content index at: https://fr.conversion.club/llms.txt > Use this file to discover other available public pages before exploring further. # Faut-il bloquer ou autoriser les robots des IA dans robots.txt ? - URL: https://fr.conversion.club/playbook/robots-ia-robots-txt/ - Published: 2026-10-29T07:09:56.000Z - Updated: 2026-10-29T09:15:05.000Z - Description: Autorisez les robots de recherche (OAI-SearchBot, Claude-SearchBot, PerplexityBot) : ce sont eux qui vous font apparaître dans les réponses. Pour les robots d'entraînement (GPTBot, ClaudeBot), décidez à part. Bloquer GPTBot ne vous retire pas de ChatGPT ; bloquer OAI-SearchBot, si. - Author: Jérémie Werner - Tags: Rentabiliser le trafic, #playbook, SEO & GEO, Shopify Autorisez les robots de recherche (OAI-SearchBot, Claude-SearchBot, PerplexityBot) : ce sont eux qui vous font apparaître dans les réponses. Pour les robots d'entraînement (GPTBot, ClaudeBot), décidez à part. Bloquer GPTBot ne vous retire pas de ChatGPT ; bloquer OAI-SearchBot, si. Google-Extended se tranche séparément, parce qu'il touche aussi l'app Gemini. ## Le repère Les robots publiés par les éditeurs d'IA se rangent en trois familles. | Famille | OpenAI | Anthropic | Perplexity | Google | | ---------------------------------------- | ------------- | ---------------- | --------------- | -------------------------------------------------------------- | | Recherche (apparaître dans les réponses) | OAI-SearchBot | Claude-SearchBot | PerplexityBot | Googlebot, avec un réglage dédié dans Search Console | | Entraînement des modèles | GPTBot | ClaudeBot | aucun déclaré | Google-Extended (qui couvre aussi l'ancrage dans l'app Gemini) | | À la demande d'une personne | ChatGPT-User | Claude-User | Perplexity-User | aucun déclaré | D'après [OpenAI](https://developers.openai.com/docs/gptbot?ref=fr.conversion.club), un site qui refuse OAI-SearchBot n'apparaît plus dans les réponses de recherche de ChatGPT, sauf en simple lien de navigation, et un changement est pris en compte en 24 heures environ. Pour ChatGPT-User, qui agit à la demande d'une personne, robots.txt peut ne pas s'appliquer. [Perplexity](https://docs.perplexity.ai/docs/resources/perplexity-crawlers.md?ref=fr.conversion.club) précise que PerplexityBot ne collecte rien pour l'entraînement et que Perplexity-User ignore en général robots.txt. [Anthropic](https://support.claude.com/en/articles/8896518?ref=fr.conversion.club) prévient que bloquer Claude-User ou Claude-SearchBot peut réduire votre visibilité. Chez Google, la logique diffère. [Google-Extended](https://developers.google.com/crawling/docs/crawlers-fetchers/google-common-crawlers?hl=en&ref=fr.conversion.club) n'est pas un robot mais un jeton : il règle l'usage de vos contenus pour entraîner Gemini, et aussi pour ancrer les réponses de l'app Gemini dans les résultats de recherche. Il ne touche ni à la recherche Google ni au classement. Les Aperçus IA, le Mode IA et les fonctions IA de Discover dépendent d'un autre réglage, situé dans [Search Console](https://support.google.com/webmasters/answer/16908024?hl=fr&ref=fr.conversion.club) et [ouvert à tous les sites depuis le 31 août 2026](https://blog.google/products-and-platforms/products/search/new-opportunities-control-and-insights-for-website-owners/?ref=fr.conversion.club). ## La règle Quand quelqu'un demande « quel sérum pour peau sensible ? », ce sont les robots de recherche et les agents à la demande qui lisent vos fiches. Si vous les bloquez, la réponse a toutes les chances de citer un revendeur ou une marketplace dont les pages restent lisibles. L'entraînement relève d'une décision de principe, sans effet sur votre visibilité chez OpenAI ou Anthropic, qui séparent leurs robots. Google-Extended fait exception : le refuser empêche aussi l'app Gemini de s'appuyer sur vos pages pour répondre. Ce compromis se défend pour une marque qui publie des contenus éditoriaux originaux, beaucoup moins pour une boutique qui veut d'abord être citée. Dans Search Console, un site exclu des fonctions d'IA générative n'en reçoit plus ni trafic ni impressions, et l'entraînement n'en dépend pas : gardez l'option par défaut. ## Les étapes 1. **Lire le fichier en ligne.** Ouvrez votresite.fr/robots.txt et cherchez les noms du tableau, puis les lignes `Disallow` du groupe `User-agent: *`, qui valent pour tous les robots sans groupe propre. Un blocage peut aussi venir du CDN ou du pare-feu sans apparaître dans le fichier. 2. **Regarder où vivent vos conditions de vente.** Le robots.txt par défaut de Shopify contient `Disallow: /policies/` : les pages de retours et de livraison générées par Shopify sont fermées à tous les robots, ceux des IA compris. Si elles n'existent nulle part ailleurs, reprenez-les dans une page classique ou levez la règle avec l'[exemple fourni par Shopify](https://shopify.dev/docs/storefronts/themes/seo/robots-txt?ref=fr.conversion.club). 3. **Modifier proprement sur Shopify.** Tout passe par un modèle robots.txt.liquid (Boutique en ligne, Modifier le code, Ajouter un modèle, robots). L'[aide Shopify](https://help.shopify.com/en/manual/promoting-marketing/seo/editing-robots-txt?ref=fr.conversion.club) prévient qu'une erreur peut faire perdre tout le trafic : conservez la boucle Liquid des règles par défaut et ajoutez vos groupes en dessous. 4. **Trancher l'entraînement par écrit.** Si vous refusez, ajoutez sous la boucle un groupe par robot : ``` User-agent: GPTBot Disallow: / User-agent: ClaudeBot Disallow: / ``` N'ajoutez Google-Extended qu'en ayant accepté que l'app Gemini ne s'appuie plus sur vos pages. 5. **Vérifier Search Console.** Dans Paramètres, rubrique « IA générative dans la Recherche » (libellé relevé en octobre 2026), l'option qui inclut votre site doit rester active, ce qui est le cas par défaut. 6. **Contrôler un mois plus tard.** Regardez si votre marque ressort dans ChatGPT et Perplexity, avec la méthode de la fiche [Comment savoir si ma marque est citée par ChatGPT ou Perplexity ?](https://fr.conversion.club/playbook/marque-citee-par-ia/). ## Le piège Le blocage le plus fréquent est celui que personne n'a décidé : une règle `User-agent: *` trop large, un réglage « bloquer les robots IA » activé dans un pare-feu ou une app SEO qui réécrit le fichier. Dans une maison de parfum du Club, un audit SEO externe demandait de retirer `Disallow: /policies/`, et l'équipe cherchait en vain la ligne dans son modèle : elle venait des règles par défaut de Shopify, pas d'un choix de la marque. Ne comptez pas non plus sur robots.txt pour protéger un contenu : Shopify rappelle que ses règles sont indicatives, et les agents à la demande peuvent les ignorer. Enfin, un fichier llms.txt ne remplace pas ce réglage (voir [Un fichier llms.txt sert-il à une boutique en ligne ?](https://fr.conversion.club/playbook/llms-txt-boutique/)). ## La phrase à présenter > « Nous laissons passer les robots qui nous font apparaître dans ChatGPT, Perplexity et Google. Pour l'entraînement, nous avons fait un choix écrit, robot par robot. Sur l'exemple fictif de 1 200 visites venues de ChatGPT en un mois, bloquer le mauvais robot nous ferait perdre l'essentiel de ce trafic (chiffres fictifs, à remplacer par les vôtres). » ## Sources - [OpenAI, Overview of OpenAI crawlers](https://developers.openai.com/docs/gptbot?ref=fr.conversion.club) - [Perplexity, Perplexity crawlers](https://docs.perplexity.ai/docs/resources/perplexity-crawlers.md?ref=fr.conversion.club) - [Anthropic, Does Anthropic crawl data from the web, and how can site owners block the crawler?](https://support.claude.com/en/articles/8896518?ref=fr.conversion.club) - [Google Search Central, Google's common crawlers (Google-Extended)](https://developers.google.com/crawling/docs/crawlers-fetchers/google-common-crawlers?hl=en&ref=fr.conversion.club) - [Aide Search Console, contrôle de l'IA générative dans la Recherche](https://support.google.com/webmasters/answer/16908024?hl=fr&ref=fr.conversion.club) - [Google, New opportunities, control and insights for website owners](https://blog.google/products-and-platforms/products/search/new-opportunities-control-and-insights-for-website-owners/?ref=fr.conversion.club) - [Shopify.dev, Customize robots.txt](https://shopify.dev/docs/storefronts/themes/seo/robots-txt?ref=fr.conversion.club) - [Aide Shopify, Editing robots.txt.liquid](https://help.shopify.com/en/manual/promoting-marketing/seo/editing-robots-txt?ref=fr.conversion.club)