Générateur de robots.txt pour l'IA
Choisissez quels robots d'IA peuvent lire votre site et obtenez des règles robots.txt prêtes à coller.
| User-agent | Opérateur | Usage | Autoriser |
|---|---|---|---|
| GPTBot | OpenAI | Entraînement de modèles | |
| OAI-SearchBot | OpenAI | Index de recherche IA | |
| ChatGPT-User | OpenAI | Demande de l'utilisateur | |
| ClaudeBot | Anthropic | Entraînement de modèles | |
| anthropic-ai | Anthropic | Entraînement de modèles | |
| Claude-User | Anthropic | Demande de l'utilisateur | |
| PerplexityBot | Perplexity | Index de recherche IA | |
| Perplexity-User | Perplexity | Demande de l'utilisateur | |
| Google-Extended | Entraînement de modèles | ||
| Applebot-Extended | Apple | Entraînement de modèles | |
| CCBot | Common Crawl | Entraînement de modèles | |
| Bytespider | ByteDance | Entraînement de modèles | |
| Meta-ExternalAgent | Meta | Entraînement de modèles |
# Règles pour les robots d'IA — à ajouter à votre robots.txt existant
User-agent: GPTBot
Disallow: /
User-agent: OAI-SearchBot
Allow: /
User-agent: ChatGPT-User
Allow: /
User-agent: ClaudeBot
Disallow: /
User-agent: anthropic-ai
Disallow: /
User-agent: Claude-User
Allow: /
User-agent: PerplexityBot
Allow: /
User-agent: Perplexity-User
Allow: /
User-agent: Google-Extended
Disallow: /
User-agent: Applebot-Extended
Disallow: /
User-agent: CCBot
Disallow: /
User-agent: Bytespider
Disallow: /
User-agent: Meta-ExternalAgent
Disallow: /Quels robots d'IA bloquer ?
Les robots d'entraînement (GPTBot, ClaudeBot, Google-Extended, CCBot, Bytespider, Meta-ExternalAgent, Applebot-Extended) collectent des pages pour entraîner les futurs modèles. Les bloquer garde votre contenu hors des données d'entraînement sans vous retirer des réponses des IA.
Les robots de recherche (OAI-SearchBot, PerplexityBot) construisent l'index que citent ChatGPT search et Perplexity. Les bloquer empêche vos pages d'être citées ou liées dans ces réponses.
Les requêtes utilisateur (ChatGPT-User, Claude-User, Perplexity-User) chargent une page uniquement quand une personne demande à l'assistant de la lire. Les bloquer casse les réponses sur votre propre site.
Collez les règles dans le robots.txt à la racine de votre domaine, à côté des règles existantes. Chaque robot applique le groupe de son user-agent ; les changements s'appliquent dès sa prochaine visite.