Réponses des IA
Bloquer GPTBot ? Robots d’entraînement et robots de recherche IA
En bref
Bloquer GPTBot est un choix de politique qui revient à votre entreprise. GPTBot collecte des contenus susceptibles de servir à entraîner les modèles d’OpenAI, tandis qu’OAI-SearchBot détermine si votre site apparaît dans la recherche de ChatGPT, et OpenAI indique que chaque réglage est indépendant. L’erreur courante consiste à tout bloquer alors que vous vouliez seulement refuser l’entraînement.
Chaque entreprise nomme ses robots selon leur usage
Voici les usages indiqués dans la documentation de chaque entreprise, vérifiés le 17 novembre 2026.
- OpenAI : GPTBot pour l’entraînement, OAI-SearchBot pour la recherche ChatGPT, ChatGPT-User pour les actions demandées par un utilisateur
- Anthropic : ClaudeBot pour l’entraînement, Claude-SearchBot pour la qualité de la recherche, Claude-User quand quelqu’un pose une question à Claude
- Perplexity : PerplexityBot pour les résultats de recherche, qui selon Perplexity ne sert pas à entraîner des modèles de fondation ; Perplexity-User pour les requêtes des utilisateurs
- Google : Googlebot pour la recherche Google. Google-Extended détermine si les contenus servent à l’entraînement futur de Gemini et à l’ancrage (grounding) ; selon Google, il n’a aucun effet sur l’inclusion ou le classement dans la recherche
Le robots.txt selon votre objectif
Le fichier robots.txt, placé à la racine de votre site, donne des instructions aux robots d’exploration.
- Tout autoriser : n’ajoutez rien. Si les deux sont autorisés, OpenAI peut utiliser une seule exploration pour les deux usages.
- Refuser l’entraînement mais rester dans la recherche ChatGPT : sous User-agent: GPTBot, ajoutez Disallow: / et ne touchez pas à OAI-SearchBot.
- Refuser les deux : bloquez GPTBot et OAI-SearchBot. Vos pages ne serviront plus aux réponses de la recherche ChatGPT.
OpenAI recommande d’autoriser OAI-SearchBot si vous souhaitez apparaître dans la recherche ChatGPT. L’autoriser ne signifie pas que vous y apparaîtrez.
Trois questions pour décider
Cette partie reflète notre avis ; la bonne réponse dépend de chaque entreprise.
- Vos pages publiques contiennent-elles des contenus originaux, comme des photos ou des guides, que vous ne voulez pas voir servir à l’entraînement ?
- Vos contrats clients ou vos règles internes précisent-ils déjà comment ces contenus peuvent être utilisés ?
- Voulez-vous que les personnes qui cherchent un prestataire avec un assistant IA puissent vous trouver ?
Un oui à l’une des deux premières questions est une raison de bloquer GPTBot. Un oui à la troisième est une raison de laisser OAI-SearchBot ouvert. Les deux peuvent être vrais en même temps. Si rien ne s’applique, conserver les réglages par défaut est raisonnable.
Corriger l’erreur la plus fréquente
« Bloquer l’IA » devient souvent une règle qui bloque tout. La demande d’exemple ci-dessous est fictive.
- Avant : User-agent: * suivi de Disallow: /. Cette règle s’applique à tous les robots, y compris Googlebot et Bingbot.
- Après : User-agent: GPTBot suivi de Disallow: /. Seul le robot nommé est concerné.
- Avant : « Merci de bloquer l’IA. »
- Après : « Merci d’interdire GPTBot, ClaudeBot et Google-Extended. Ne bloquez pas OAI-SearchBot, Claude-SearchBot ni PerplexityBot. Envoyez-moi le fichier robots.txt après la modification. »
Ce que le robots.txt ne peut pas faire
Google rappelle que le respect du robots.txt dépend du robot lui-même. Anthropic présente le blocage de ClaudeBot comme un signal pour exclure de l’entraînement les futurs contenus du site ; nous n’avons trouvé aucune indication sur les contenus déjà collectés. OpenAI indique que les règles du robots.txt peuvent ne pas s’appliquer aux visites de ChatGPT-User déclenchées par un utilisateur, et Perplexity indique que Perplexity-User ignore généralement le robots.txt. Selon OpenAI, une modification peut mettre environ 24 heures à se répercuter sur la recherche. Pour garder un contenu privé, placez-le plutôt derrière une connexion.
Vérifier votre fichier aujourd’hui
Ouvrez votre domaine suivi de /robots.txt. Repérez les groupes GPTBot et OAI-SearchBot et lisez leurs lignes Disallow, puis vérifiez que User-agent: * n’est pas suivi de Disallow: /. Notre outil gratuit https://get1pct.com/fr/tools/ai-crawler-check lit le fichier pour vous et indique quels robots de recherche IA et d’entraînement sont bloqués. Notez en une ligne ce que vous avez décidé et pourquoi. Des règles peuvent aussi être appliquées par un CDN ou un pare-feu, ce que le robots.txt ne montre pas. Nous ne pouvons pas décider de cette politique à votre place ni promettre une visibilité dans les réponses des IA.