AIVIS
← Tous les articles
20/04/2026

robots.txt et bots IA : lesquels bloquer, lesquels autoriser (et pourquoi)

La question n'est pas « bloquer tous les bots IA ou tous les autoriser » : chaque bot a un rôle différent, et le bon choix dépend de votre objectif.

Deux catégories, deux décisions distinctes

Bots d'entraînement (GPTBot, ClaudeBot, CCBot, Bytespider, Meta-ExternalAgent) : ils collectent du contenu pour entraîner les futurs modèles. Les bloquer ne vous exclut pas des réponses d'aujourd'hui, mais des données sur lesquelles les modèles de demain seront entraînés.

Bots de citation / navigation en direct (OAI-SearchBot, Perplexity-User, ChatGPT-User) : ils interviennent en temps réel pour répondre à une requête précise, avec citation. Les bloquer exclut le site des réponses IA dès aujourd'hui.

Le choix le plus courant (et notre recommandation par défaut)

Si votre objectif est d'être cité et de recevoir du trafic de référence depuis les assistants IA (qui convertit environ 5 fois mieux que l'organique, données de marché 2026), autoriser les deux catégories est presque toujours le bon choix : plus les sources d'entraînement vous connaissent, plus vous avez de chances d'être cité à l'avenir.

Quand le blocage se justifie

Un modèle prêt à l'emploi

Nous avons publié un modèle de robots.txt commenté, favorable à l'IA, qui autorise explicitement tous les bots IA connus tout en conservant vos règles existantes. Sinon, un rapport AIVIS génère la version corrigée pour votre domaine.

Votre site est-il citable par l'IA ?

Découvrez-le gratuitement en moins de 90 secondes, sans inscription.