Bot AI: lista completa degli user-agent
Ogni motore di risposta AI usa un crawler con uno user-agent dichiarato. Questa lista è generata direttamente dalla stessa costante usata dal nostro motore di scansione: resta sincronizzata automaticamente quando emergono nuovi bot.
| User-agent | Motore / scopo | Categoria |
|---|---|---|
| GPTBot | OpenAI (ChatGPT) — training | Training |
| OAI-SearchBot | OpenAI — ChatGPT search & citations | Citazione live |
| ChatGPT-User | OpenAI — live browsing in ChatGPT | Citazione live |
| ClaudeBot | Anthropic (Claude) — training/crawling | Training |
| anthropic-ai | Anthropic — generic crawling (legacy) | Training |
| Claude-SearchBot | Anthropic — Claude search index & citations | Training |
| Claude-User | Anthropic — live browsing in Claude | Citazione live |
| PerplexityBot | Perplexity — crawling & citations | Citazione live |
| Perplexity-User | Perplexity — live browsing | Citazione live |
| Google-Extended | Google — training Gemini/AI Overviews | Training |
| Applebot-Extended | Apple Intelligence | Training |
| MistralAI-User | Mistral — live browsing in Le Chat | Training |
| DuckAssistBot | DuckDuckGo — DuckAssist answers | Training |
| Meta-ExternalFetcher | Meta AI — live fetching | Training |
| CCBot | Common Crawl (used to train many LLMs) | Training |
| Bytespider | ByteDance (also used for AI training) | Training |
| Meta-ExternalAgent | Meta AI | Training |
"Training" raccoglie contenuto per l'addestramento di modelli futuri; "Citazione live" risponde in tempo reale a una query specifica citando fonti. Bloccare l'uno non blocca automaticamente l'altro: vanno gestiti separatamente in robots.txt.
Vuoi sapere quali di questi bot il tuo sito blocca oggi?
Controlla il tuo robots.txt gratis