Bots IA : liste complète des user-agents
Chaque moteur de réponse IA utilise un robot d'exploration avec un user-agent déclaré. Cette liste est générée directement à partir de la même constante utilisée par notre moteur d'analyse : elle reste synchronisée automatiquement quand de nouveaux bots apparaissent.
| User-agent | Moteur / objectif | Catégorie |
|---|---|---|
| GPTBot | OpenAI (ChatGPT) — training | Entraînement |
| OAI-SearchBot | OpenAI — ricerca/citazioni ChatGPT | Citation en direct |
| ChatGPT-User | OpenAI — browsing live in ChatGPT | Citation en direct |
| ClaudeBot | Anthropic (Claude) — training/crawling | Entraînement |
| anthropic-ai | Anthropic — crawling generico | Entraînement |
| Claude-User | Anthropic — browsing live in Claude | Citation en direct |
| PerplexityBot | Perplexity — crawling/citazioni | Citation en direct |
| Perplexity-User | Perplexity — browsing live | Citation en direct |
| Google-Extended | Google — training Gemini/AI Overviews | Entraînement |
| Applebot-Extended | Apple Intelligence | Entraînement |
| CCBot | Common Crawl (used to train many LLMs) | Entraînement |
| Bytespider | ByteDance (also used for AI training) | Entraînement |
| Meta-ExternalAgent | Meta AI | Entraînement |
"Entraînement" collecte du contenu pour entraîner de futurs modèles ; "Citation en direct" répond en temps réel à une requête spécifique en citant des sources. Bloquer l'un ne bloque pas automatiquement l'autre : ils doivent être gérés séparément dans robots.txt.
Vous voulez savoir lesquels de ces bots votre site bloque aujourd'hui ?
Vérifiez gratuitement votre robots.txt