Générateur de robots.txt pour l'IA
Choisissez quels robots d'IA peuvent lire votre site et obtenez des règles robots.txt prêtes à coller.
| User-agent | Opérateur | Usage | Autoriser |
|---|---|---|---|
| GPTBot | OpenAI | Entraînement de modèles | |
| OAI-SearchBot | OpenAI | Index de recherche IA | |
| ChatGPT-User | OpenAI | Demande de l'utilisateur | |
| ClaudeBot | Anthropic | Entraînement de modèles | |
| anthropic-ai | Anthropic | Entraînement de modèles | |
| Claude-SearchBot | Anthropic | Index de recherche IA | |
| Claude-User | Anthropic | Demande de l'utilisateur | |
| PerplexityBot | Perplexity | Index de recherche IA | |
| Perplexity-User | Perplexity | Demande de l'utilisateur | |
| Google-Extended | Entraînement de modèles | ||
| Applebot-Extended | Apple | Entraînement de modèles | |
| MistralAI-User | Mistral | Demande de l'utilisateur | |
| DuckAssistBot | DuckDuckGo | Demande de l'utilisateur | |
| Meta-ExternalFetcher | Meta | Demande de l'utilisateur | |
| CCBot | Common Crawl | Entraînement de modèles | |
| Bytespider | ByteDance | Entraînement de modèles | |
| Meta-ExternalAgent | Meta | Entraînement de modèles |
# Règles pour les robots d'IA — à ajouter à votre robots.txt existant
User-agent: GPTBot
Disallow: /
User-agent: OAI-SearchBot
Allow: /
User-agent: ChatGPT-User
Allow: /
User-agent: ClaudeBot
Disallow: /
User-agent: anthropic-ai
Disallow: /
User-agent: Claude-SearchBot
Allow: /
User-agent: Claude-User
Allow: /
User-agent: PerplexityBot
Allow: /
User-agent: Perplexity-User
Allow: /
User-agent: Google-Extended
Disallow: /
User-agent: Applebot-Extended
Disallow: /
User-agent: MistralAI-User
Allow: /
User-agent: DuckAssistBot
Allow: /
User-agent: Meta-ExternalFetcher
Allow: /
User-agent: CCBot
Disallow: /
User-agent: Bytespider
Disallow: /
User-agent: Meta-ExternalAgent
Disallow: /Obtenez le rapport complet de visibilité IA de votre site
Cet outil vérifie un seul point. L'analyse complète vérifie tout ce que regardent ChatGPT, Perplexity, Gemini et Claude, lui attribue un score et revérifie votre site chaque mois par email. Gratuit, sans compte.
Uniquement des emails sur ce domaine, pas de spam. Désinscription à tout moment.
Besoin d'un suivi quotidien, de plus de sites ou de rapports en marque blanche ? Voir les offresQuels robots d'IA bloquer ?
Les robots d'entraînement (GPTBot, ClaudeBot, Google-Extended, CCBot, Bytespider, Meta-ExternalAgent, Applebot-Extended) collectent des pages pour entraîner les futurs modèles. Les bloquer garde votre contenu hors des données d'entraînement sans vous retirer des réponses des IA.
Les robots de recherche (OAI-SearchBot, Claude-SearchBot, PerplexityBot) construisent l'index que citent ChatGPT search et Perplexity. Les bloquer empêche vos pages d'être citées ou liées dans ces réponses.
Les requêtes utilisateur (ChatGPT-User, Claude-User, Perplexity-User, MistralAI-User, DuckAssistBot, Meta-ExternalFetcher) chargent une page uniquement quand une personne demande à l'assistant de la lire. Les bloquer casse les réponses sur votre propre site.
Collez les règles dans le robots.txt à la racine de votre domaine, à côté des règles existantes. Chaque robot applique le groupe de son user-agent ; les changements s'appliquent dès sa prochaine visite.