# Votre site bloque-t-il ChatGPT ? robots.txt, Cloudflare et robots IA

> Les robots des assistants IA forment deux familles : ceux qui lisent vos pages pour les citer (OAI-SearchBot, Claude-SearchBot, PerplexityBot…) et ceux qui collectent pour entraîner des modèles (GPTBot, ClaudeBot, Google-Extended…). Bloquer les premiers vous retire des réponses ; bloquer les seconds est un choix légitime. Vérifiez votre robots.txt en ligne et les réglages de votre CDN, Cloudflare en tête, qui peuvent bloquer un robot même quand le fichier l'autorise.

Source : https://tonaily.com/fr/guides/ai-crawlers-robots-txt/
Mis à jour le : 2026-10-08
Vérifié avec les sources au : 2026-10-08

## Votre site bloque-t-il ChatGPT sans que vous le sachiez ?

C'est possible : une ligne copiée dans le robots.txt ou un réglage par défaut du CDN suffit à empêcher ChatGPT, Claude ou Perplexity de lire vos pages, donc de les citer. Le site fonctionne, Google l'indexe, rien ne prévient.

La scène classique. En 2024, vous avez lu qu'il fallait « bloquer les IA » pour protéger votre contenu. Vous avez collé une liste trouvée sur un forum dans votre robots.txt. Deux ans plus tard, un prospect demande à ChatGPT un prestataire dans votre ville : vos concurrents sortent, avec un lien vers leur site. Vous, jamais. Dans la liste copiée, il y avait `OAI-SearchBot`, le robot qui alimente justement la recherche de ChatGPT.

Ce guide trie les robots d'après la documentation de chaque fournisseur, puis montre comment autoriser la citation sans autoriser l'entraînement.

## Quels robots lisent votre site pour les assistants IA ?

Il y a deux familles : les robots de **citation**, qui vont chercher vos pages pour répondre à une question et les citer, et les robots d'**entraînement**, qui collectent du contenu pour entraîner de futurs modèles. Bloquer les premiers vous rend invisible dans les réponses ; bloquer les seconds n'y change rien, selon les fournisseurs.

| Robot | Fournisseur | Famille | Applique le robots.txt ? |
|---|---|---|---|
| OAI-SearchBot | OpenAI | Citation (ChatGPT search) | Oui, c'est le réglage prévu |
| ChatGPT-User | OpenAI | Citation (visite à la demande) | Pas toujours, d'après OpenAI |
| Claude-SearchBot | Anthropic | Citation (index de recherche) | Oui, d'après Anthropic |
| Claude-User | Anthropic | Citation (visite à la demande) | Oui, d'après Anthropic |
| PerplexityBot | Perplexity | Citation (résultats Perplexity) | Oui, c'est le réglage prévu |
| Perplexity-User | Perplexity | Citation (visite à la demande) | En général non, d'après Perplexity |
| GPTBot | OpenAI | Entraînement | Oui |
| ClaudeBot | Anthropic | Entraînement | Oui, d'après Anthropic |
| Google-Extended | Google | Entraînement et grounding Gemini | Jeton robots.txt, pas un robot |
| Applebot-Extended | Apple | Entraînement | Jeton robots.txt, pas un robot |
| Meta-ExternalAgent | Meta | Entraînement (et indexation) | Se bloque par robots.txt, d'après Meta |
| CCBot | Common Crawl | Corpus ouvert, réutilisé pour l'entraînement | Oui, d'après Common Crawl |

Ces 12 robots, avec ce classement, sont ceux que vérifient l'audit gratuit et le serveur MCP de Tonaily. D'autres existent.

## Que fait chaque robot, d'après son fournisseur ?

OpenAI, Anthropic et Perplexity séparent un robot qui indexe pour leur recherche et un robot qui ouvre une page à la demande d'un utilisateur ; OpenAI et Anthropic y ajoutent un robot d'entraînement. Google, Apple, Meta et Common Crawl ne figurent ici que pour l'entraînement. Chaque fournisseur le documente sur une page dédiée, la seule source fiable.

### OpenAI : OAI-SearchBot, ChatGPT-User, GPTBot

OpenAI sépare nettement la recherche de l'entraînement, et écrit que « Each setting is independent of the others » ([Overview of OpenAI Crawlers](https://developers.openai.com/api/docs/bots)).

```quote source="OpenAI, Overview of OpenAI Crawlers" href="https://developers.openai.com/api/docs/bots"
Sites that are opted out of OAI-SearchBot will not be shown in ChatGPT search answers, though can still appear as navigational links.
```

Autrement dit : sans OAI-SearchBot, vos pages ne sont plus montrées dans les réponses de ChatGPT search, au mieux comme simple lien de navigation. GPTBot, lui, collecte du contenu qui peut servir à entraîner les modèles ; le bloquer signale que vous refusez cet usage. ChatGPT-User visite une page quand un utilisateur le demande dans une conversation ; OpenAI prévient que pour ces visites « robots.txt rules may not apply », et que ce robot ne décide pas de l'apparition dans la recherche. Après une modification du robots.txt, OpenAI compte environ 24 heures avant que ses systèmes s'ajustent.

### Anthropic : Claude-SearchBot, Claude-User, ClaudeBot

Anthropic décrit trois robots et ce que chaque blocage coûte ([page d'aide Anthropic](https://support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-can-site-owners-block-the-crawler)). Bloquer Claude-SearchBot empêche l'indexation pour la recherche et peut réduire votre visibilité dans les résultats. Bloquer Claude-User empêche Claude de récupérer votre page quand un utilisateur pose une question. Bloquer ClaudeBot signale que vos futurs contenus doivent être exclus des données d'entraînement. Anthropic affirme que ses robots respectent le robots.txt.

### Perplexity : PerplexityBot, Perplexity-User

PerplexityBot sert à « surface and link websites in search results on Perplexity » et n'est pas utilisé pour entraîner des modèles ([Perplexity Crawlers](https://docs.perplexity.ai/guides/bots)). Perplexity recommande de l'autoriser. Perplexity-User accompagne les actions des utilisateurs et, selon la même page, « generally ignores robots.txt rules ». Comptez jusqu'à 24 heures pour qu'un changement soit pris en compte.

### Google, Apple, Meta, Common Crawl : les robots d'entraînement

**Google-Extended** n'est pas un robot : c'est un jeton du robots.txt, sans user-agent propre, qui décide si le contenu déjà exploré peut servir à entraîner les modèles Gemini et au grounding dans les applications Gemini et Vertex AI ([Google's common crawlers](https://developers.google.com/search/docs/crawling-indexing/google-common-crawlers)). Même logique chez Apple : **Applebot-Extended** « does not crawl webpages », il règle l'usage pour l'entraînement de ce qu'Applebot a collecté, et les pages qui le refusent restent dans les résultats de recherche d'Apple ([About Applebot](https://support.apple.com/en-us/119829)).

**Meta-ExternalAgent** explore le web pour « training foundation AI models or improving products by indexing content directly » ([Meta Web Crawlers](https://developers.facebook.com/docs/sharing/webmasters/web-crawlers/)) : un usage mixte, que Tonaily classe en entraînement. **CCBot** est le robot de Common Crawl, une fondation qui publie une archive ouverte du web ; sa FAQ indique qu'il lit d'abord le robots.txt ([Common Crawl FAQ](https://commoncrawl.org/faq)), et un `User-agent: CCBot` suivi de `Disallow: /` suffit à l'écarter ([CCBot](https://commoncrawl.org/ccbot)). Cette archive sert à entraîner des modèles : dans l'article de GPT-3, une version filtrée de Common Crawl pèse 60 % du mélange d'entraînement ([Brown et al., 2020](https://arxiv.org/abs/2005.14165)).

## Comment autoriser la citation et refuser l'entraînement ?

En écrivant un groupe de règles par famille : un groupe qui autorise les six robots de citation, un groupe qui refuse les six robots d'entraînement, puis votre groupe générique pour tous les autres. Voici un fichier commenté, à adapter.

```txt title="robots.txt"
# Robots de citation : ils lisent vos pages pour les citer
User-agent: OAI-SearchBot
User-agent: ChatGPT-User
User-agent: Claude-SearchBot
User-agent: Claude-User
User-agent: PerplexityBot
User-agent: Perplexity-User
Allow: /
# Recopiez ici vos exclusions : ce groupe remplace le groupe *
Disallow: /admin/
Disallow: /panier/

# Robots d'entraînement : ils collectent pour entraîner des modèles
User-agent: GPTBot
User-agent: ClaudeBot
User-agent: Google-Extended
User-agent: Applebot-Extended
User-agent: Meta-ExternalAgent
User-agent: CCBot
Disallow: /

# Tous les autres, dont Googlebot et Bingbot
User-agent: *
Disallow: /admin/
Disallow: /panier/

Sitemap: https://www.votresite.fr/sitemap.xml
```

La ligne qui surprend est le `Disallow: /admin/` répété. La norme du robots.txt, la [RFC 9309](https://www.rfc-editor.org/rfc/rfc9309.html), dit qu'un robot suit le groupe qui le nomme et ne lit le groupe `*` que si aucun groupe ne le nomme. Dès que vous écrivez un groupe pour OAI-SearchBot, vos exclusions générales ne s'appliquent plus à lui : il faut les recopier. L'inverse piège aussi : un groupe `User-agent: GPTBot` avec `Disallow: /` ne protège rien d'autre que GPTBot.

Trois règles de lecture, toujours d'après la RFC 9309 : le nom du robot se compare sans tenir compte des majuscules ; plusieurs groupes qui nomment le même robot s'additionnent ; entre deux règles qui visent un chemin, la plus longue l'emporte, et à égalité `Allow` est préféré. La même RFC rappelle que ces règles « are not a form of access authorization » : un robot peut les ignorer, ce que font parfois les visites déclenchées par un utilisateur.

Bloquer l'entraînement est un choix d'éditeur défendable, pas une erreur. Sachez seulement ce qu'il implique : un futur modèle aura moins de chances d'avoir appris votre marque et de la citer de mémoire, sans recherche web. C'est une déduction, pas un fait documenté ; le guide [GEO : être cité par ChatGPT, Gemini et Grok](/fr/guides/generative-engine-optimization/) détaille la différence entre réponse de mémoire et réponse avec recherche.

## Votre robots.txt bloque-t-il un robot de citation ?

Collez-le ci-dessous : le vérificateur applique les règles de la RFC 9309 aux 12 robots pour votre page d'accueil, et sépare les deux familles. L'exemple prérempli est un cas typique : une liste « anti-IA » copiée telle quelle.

```robots-checker
# Bloquer les IA (liste copiée d'un forum)
User-agent: GPTBot
User-agent: ClaudeBot
User-agent: CCBot
User-agent: Google-Extended
User-agent: OAI-SearchBot
Disallow: /

User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

Sitemap: https://www.votresite.fr/sitemap.xml
```

Résultat sur l'exemple : cinq robots refusés, dont quatre d'entraînement (un choix assumé) et **OAI-SearchBot**, un robot de citation. Ce site ne peut plus être montré dans les réponses de ChatGPT search, alors que Claude et Perplexity peuvent le lire. Retirez la ligne `User-agent: OAI-SearchBot` et relancez : les six robots de citation passent.

Collez toujours le fichier servi en ligne (`votresite.fr/robots.txt`), pas celui de votre CMS : un CDN ou une extension peut y ajouter des lignes. Et un robots.txt parfait ne dit rien des blocages réseau.

```tonaily
L'[audit gratuit](https://app.tonaily.com/tools/check/) lit votre robots.txt en ligne et contrôle les **12 robots de ce tableau**, plus llms.txt, llms-full.txt et le balisage schema.org de la page d'accueil. Le contrôle « aucun robot de citation bloqué » pèse 20 points sur la note de 100 ; un robot d'entraînement bloqué ne coûte rien, parce que c'est un choix.
```

## Cloudflare bloque-t-il les robots IA à votre insu ?

Peut-être : Cloudflare propose depuis 2025 de bloquer les robots IA dès l'inscription d'un domaine, et recommande depuis le 15 septembre 2026 aux nouveaux sites financés par la publicité de bloquer les agents comme ChatGPT-User sur leurs pages avec annonces. Ces blocages passent par le pare-feu, donc ils s'appliquent même si votre robots.txt autorise tout.

Les dates, d'après Cloudflare :

1. **1er juillet 2025.** Cloudflare annonce « changing the default to block AI crawlers unless they pay creators for their content » ([Content Independence Day](https://blog.cloudflare.com/content-independence-day-no-ai-crawl-without-compensation/)). Concrètement, chaque nouveau domaine se voit demander à l'inscription s'il autorise les robots IA ([communiqué](https://www.cloudflare.com/press-releases/2025/cloudflare-just-changed-how-ai-crawlers-scrape-the-internet-at-large/)), avec un blocage possible partout ou seulement sur les noms d'hôte qui affichent de la publicité ([Control content use for AI training](https://blog.cloudflare.com/control-content-use-for-ai-training/)).
2. **1er juillet 2026.** Les robots sont rangés en trois catégories : Search, Agent et Training. La catégorie Agent comprend explicitement « chat fetch bots (e.g., ChatGPT-User) » ([Your site, your rules](https://blog.cloudflare.com/content-independence-day-ai-options/)).
3. **15 septembre 2026.** Un nouveau réglage, « Disallow AI Training », publie le refus d'entraînement dans le robots.txt via Bot Preference Sync, qui remplace le robots.txt géré. À l'inscription d'un nouveau domaine, Cloudflare propose désormais une configuration recommandée selon que le site vit de la publicité ou non : sans publicité, tout est autorisé ; avec publicité, Search reste autorisé, Training passe sur « Disallow AI Training » et Agent est bloqué sur les pages avec annonces. Les réglages des domaines existants sont migrés automatiquement ([Have it both ways](https://blog.cloudflare.com/accountable-mixed-use-ai-crawlers/)), et l'ancien interrupteur « Block AI bots » est déprécié au profit des trois catégories ([Block AI bots](https://developers.cloudflare.com/bots/additional-configurations/block-ai-bots/)).

Deux pièges en découlent. D'abord, un site financé par la publicité qui accepte la configuration recommandée voit ChatGPT-User bloqué sur ses pages avec annonces : ChatGPT ne peut plus les ouvrir quand un utilisateur le demande. Ensuite, et c'est le plus coûteux : Cloudflare écrit que « Block and Block on pages with ads now apply to mixed-use crawlers, including Applebot, Bingbot, and Googlebot ». Choisir « Block » (ou « Block on pages with ads ») pour la catégorie Training peut donc bloquer Googlebot, et avec lui votre référencement Google. Si vous voulez refuser l'entraînement sans toucher à la recherche, c'est « Disallow AI Training » qu'il faut choisir.

Pour vérifier, Cloudflare documente la marche à suivre dans [AI Crawl Control](https://developers.cloudflare.com/ai-crawl-control/features/manage-ai-crawlers/), disponible y compris sur la formule gratuite :

1. Ouvrez le tableau de bord Cloudflare, choisissez le domaine, puis **AI Crawl Control**.
2. Dans la liste des robots, repérez OAI-SearchBot, ChatGPT-User, Claude-SearchBot, Claude-User, PerplexityBot et Perplexity-User.
3. Dans la colonne **Actions**, passez-les en **Allow** s'ils sont bloqués. Un blocage y prend la forme d'une règle WAF sur votre zone.
4. Relisez les réglages Search, Agent et Training dans les paramètres de sécurité, et ouvrez votre robots.txt en ligne pour voir les lignes que Cloudflare y publie.

AI Crawl Control compte aussi les infractions de chaque robot à votre robots.txt. Les pare-feu d'hébergeurs et les extensions de sécurité WordPress ont leurs propres listes de robots bloqués : même vérification.

## Bloquer Google-Extended vous retire-t-il des AI Overviews ?

Non. Google-Extended règle l'entraînement de Gemini et le grounding dans les applications Gemini et Vertex AI ; il ne touche ni à Google Search, ni à AI Overviews, ni à AI Mode.

```quote source="Google Search Central, Google's common crawlers" href="https://developers.google.com/search/docs/crawling-indexing/google-common-crawlers"
Google-Extended does not impact a site's inclusion in Google Search nor is it used as a ranking signal in Google Search.
```

AI Overviews et AI Mode s'appuient sur l'index de Googlebot. Google écrit que pour y figurer comme lien, une page doit être indexée et pouvoir s'afficher avec un extrait, sans fichier ni balisage spécial ([AI features and your website](https://developers.google.com/search/docs/appearance/ai-features)). Pour limiter ce qui est repris, Google renvoie aux balises `nosnippet`, `data-nosnippet`, `max-snippet` et `noindex`.

Nouveauté de 2026 : un réglage **Search generative AI** dans Search Console permet d'exclure un site d'AI Overviews, d'AI Mode et des fonctions génératives de Discover. Annoncé le 3 juin 2026 et testé d'abord au Royaume-Uni, il est ouvert à tous les sites depuis le 31 août 2026 ([Google](https://blog.google/products-and-platforms/products/search/new-controls-website-owners/)). Il se trouve dans **Paramètres > Search generative AI**. L'inclusion est le réglage par défaut ; l'exclusion prend en général quelques jours, ne sert pas de signal de classement pour le reste de Search, et « doesn't affect AI training » : pour l'entraînement, c'est toujours Google-Extended ([aide Search Console](https://support.google.com/webmasters/answer/16908024?hl=en)). Si vous voulez être cité, vérifiez que personne ne l'a basculé sur « Exclude ».

## Comment vérifier que la correction fonctionne ?

En contrôlant les trois couches dans l'ordre (robots.txt en ligne, CDN ou pare-feu, puis les réponses des assistants), et en laissant au moins 24 heures entre la correction et le constat.

```mermaid
flowchart TD
  A[Site absent des réponses IA] --> B{robots.txt bloque un robot ?}
  B -- Oui --> C[Corriger robots.txt]
  B -- Non --> D{Bloqué par CDN ou pare-feu ?}
  D -- Oui --> E[Débloquer dans le CDN]
  D -- Non --> F{Exclu dans Search Console ?}
  F -- Oui --> G[Repasser sur Include]
  F -- Non --> H[Accès OK : voir le contenu]
  C --> I[Attendre 24 h puis retester]
  E --> I
  G --> I
```

Si tout est ouvert et que vous n'êtes toujours pas cité, la cause n'est plus technique : le guide [Pourquoi ChatGPT recommande votre concurrent et pas vous ?](/fr/guides/why-chatgpt-recommends-competitor/) passe en revue les cinq autres causes probables.

Dans vos journaux serveur, le user-agent s'imite facilement : OpenAI, Anthropic et Perplexity publient les adresses IP de leurs robots (`openai.com/searchbot.json`, `claude.com/crawling/bots.json`, `www.perplexity.com/perplexitybot.json`) pour vérifier qu'une visite est authentique.

```checklist title="Ouvrir son site aux assistants IA"
- Ouvrir `votresite.fr/robots.txt` dans le navigateur et le passer dans le vérificateur ci-dessus
- Vérifier qu'aucun des six robots de citation n'est bloqué, `OAI-SearchBot` en premier
- Recopier les exclusions du groupe `*` dans chaque groupe qui nomme un robot
- Décider, en connaissance de cause, d'autoriser ou non les six robots d'entraînement
- Dans Cloudflare, ouvrir **AI Crawl Control** et passer les robots de citation en **Allow**
- Dans Cloudflare, choisir « Disallow AI Training » plutôt que « Block » pour la catégorie Training
- Vérifier les listes de robots bloqués du pare-feu de l'hébergeur et des extensions de sécurité
- Dans Search Console, vérifier que le réglage Search generative AI est sur « Include »
- Attendre 24 heures, puis relancer l'[audit gratuit](https://app.tonaily.com/tools/check/)
```

```tonaily
Le [serveur MCP gratuit](/fr/mcp/) de Tonaily expose l'outil **check-ai-crawlers** : demandez à Claude, ChatGPT ou Cursor « mon robots.txt laisse-t-il passer ChatGPT ? », la réponse arrive dans le même appel, robot par robot, sans compte. Avec l'option `includeFile`, il rend le robots.txt corrigé : votre fichier intact, plus un groupe `Allow: /` pour chaque robot de citation encore bloqué, sans toucher à vos refus d'entraînement. Le branchement pas à pas est dans le guide [Brancher Claude, ChatGPT ou Cursor sur son SEO avec MCP](/fr/guides/mcp-seo/).
```

Une fois l'accès réglé, reste à mesurer si les assistants vous citent vraiment. Le [test gratuit](https://app.tonaily.com/tools/visibility/) pose une question à ChatGPT, Claude, Gemini et Perplexity, sans compte ; pour un suivi dans la durée, choisissez d'abord les bonnes questions avec le guide [Choisir les questions à suivre dans les assistants IA](/fr/guides/ai-visibility-prompts/).

```tonaily
Dans les offres payantes, la page **Visibilité IA** affiche l'état des 12 robots pour votre site et propose de télécharger un robots.txt corrigé, en choisissant les robots à débloquer. Elle suit aussi vos réponses dans ChatGPT et Gemini (plus Grok dès Growth). [Voir le Suivi](/fr/features/track/).
```

## Questions fréquentes

### Bloquer GPTBot me fait-il disparaître de ChatGPT ?

Non. D'après OpenAI, GPTBot sert à l'entraînement et OAI-SearchBot à la recherche, et chaque réglage est indépendant. Tant qu'OAI-SearchBot est autorisé, vos pages restent éligibles aux réponses de ChatGPT search.

### Bloquer Google-Extended me retire-t-il des AI Overviews ?

Non. Google écrit que Google-Extended n'a aucun effet sur l'inclusion dans Google Search ni sur le classement. AI Overviews et AI Mode dépendent de Googlebot, des balises de snippet et, depuis le 31 août 2026 partout dans le monde, d'un réglage dédié dans Search Console.

### Le robots.txt suffit-il à empêcher une IA de lire mon site ?

Non. La norme RFC 9309 précise que ces règles ne sont pas un contrôle d'accès. OpenAI et Perplexity indiquent aussi que leurs robots déclenchés par un utilisateur (ChatGPT-User, Perplexity-User) peuvent ne pas appliquer le robots.txt. Pour bloquer vraiment, il faut une règle de pare-feu ou un réglage CDN.

### Combien de temps faut-il pour qu'une correction du robots.txt soit prise en compte ?

OpenAI compte environ 24 heures pour qu'OAI-SearchBot tienne compte d'une mise à jour, Perplexity jusqu'à 24 heures. Revenir dans les réponses prend ensuite plus de temps : la page doit être relue, puis jugée pertinente pour la question.

### Faut-il bloquer les robots d'entraînement ?

C'est un choix d'éditeur, pas une erreur technique. Les bloquer ne touche pas à la citation selon la documentation des fournisseurs. En revanche, un futur modèle aura moins de chances d'avoir appris votre marque : c'est une déduction logique, aucun fournisseur ne le chiffre.

### Comment savoir si Cloudflare bloque les robots IA sur mon site ?

Ouvrez AI Crawl Control dans le tableau de bord Cloudflare : la liste des robots IA indique pour chacun s'il est autorisé ou bloqué. Vérifiez aussi les réglages Search, Agent et Training des paramètres de sécurité, et lisez votre robots.txt en ligne, car Cloudflare peut y ajouter des lignes.


## Sources

- [OpenAI : Overview of OpenAI Crawlers](https://developers.openai.com/api/docs/bots)
- [Anthropic : Does Anthropic crawl data from the web, and how can site owners block the crawler?](https://support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-can-site-owners-block-the-crawler)
- [Perplexity : Perplexity Crawlers](https://docs.perplexity.ai/guides/bots)
- [Google Search Central : Google's common crawlers (Google-Extended)](https://developers.google.com/search/docs/crawling-indexing/google-common-crawlers)
- [Google Search Central : AI features and your website](https://developers.google.com/search/docs/appearance/ai-features)
- [Aide Search Console : Search generative AI control](https://support.google.com/webmasters/answer/16908024?hl=en)
- [Google : New opportunities, control and insights for website owners (3 juin 2026)](https://blog.google/products-and-platforms/products/search/new-controls-website-owners/)
- [Apple : About Applebot](https://support.apple.com/en-us/119829)
- [Meta : Meta Web Crawlers](https://developers.facebook.com/docs/sharing/webmasters/web-crawlers/)
- [Common Crawl : CCBot](https://commoncrawl.org/ccbot)
- [Common Crawl : FAQ](https://commoncrawl.org/faq)
- [Brown et al., Language Models are Few-Shot Learners (arXiv, 2020)](https://arxiv.org/abs/2005.14165)
- [IETF : RFC 9309, Robots Exclusion Protocol](https://www.rfc-editor.org/rfc/rfc9309.html)
- [Cloudflare Blog : Content Independence Day (1er juillet 2025)](https://blog.cloudflare.com/content-independence-day-no-ai-crawl-without-compensation/)
- [Cloudflare : communiqué du 1er juillet 2025 sur les robots IA](https://www.cloudflare.com/press-releases/2025/cloudflare-just-changed-how-ai-crawlers-scrape-the-internet-at-large/)
- [Cloudflare Blog : Control content use for AI training (1er juillet 2025)](https://blog.cloudflare.com/control-content-use-for-ai-training/)
- [Cloudflare Blog : Your site, your rules: new AI traffic options for all customers (1er juillet 2026)](https://blog.cloudflare.com/content-independence-day-ai-options/)
- [Cloudflare Blog : Have it both ways: stay discoverable in search while disallowing AI training (15 septembre 2026)](https://blog.cloudflare.com/accountable-mixed-use-ai-crawlers/)
- [Cloudflare Docs : Block AI bots](https://developers.cloudflare.com/bots/additional-configurations/block-ai-bots/)
- [Cloudflare Docs : AI Crawl Control, manage AI crawlers](https://developers.cloudflare.com/ai-crawl-control/features/manage-ai-crawlers/)