Blog · Pour les professionnels
Site qui bloque ChatGPT : comment savoir si c'est ton cas
Si tu te demandes si tu as un site qui bloque ChatGPT sans t'en rendre compte, tu n'es pas seul. Beaucoup de professionnels découvrent par hasard, souvent en cherchant leur propre activité sur ChatGPT, que leur site n'est jamais cité. Et bien souvent, la raison n'est pas la qualité des contenus, mais une ligne de code oubliée des années plus tôt.
Imagine demander à un assistant IA : "vérifie si mon site bloque les bots de ChatGPT". C'est exactement la bonne question à se poser, car la réponse se trouve en quelques minutes, sans compétences techniques avancées. Il suffit de savoir où regarder.
Pourquoi un site peut bloquer ChatGPT sans que le propriétaire le sache
Le cas le plus courant est celui-ci : le site a été créé par une agence ou avec un thème WordPress qui, par prudence ou par erreur, a mis en place des règles trop restrictives dans le fichier robots.txt. D'autres fois, c'est un plugin de sécurité qui bloque automatiquement tout bot non reconnu comme étant Google. Dans les deux cas, le résultat est le même : les systèmes qui alimentent ChatGPT, Perplexity ou Gemini ne parviennent pas à lire les pages, et ne peuvent donc jamais te citer comme source.
Comment vérifier le robots.txt de ton site
Le fichier robots.txt est le premier endroit à vérifier. Il se trouve toujours à la même adresse : il suffit d'écrire ton domaine suivi de "/robots.txt" dans la barre du navigateur. Par exemple, si ton site est www.tonsite.fr, tu iras sur www.tonsite.fr/robots.txt.
Une fois la page ouverte, recherche des lignes contenant des noms comme ceux-ci :
- GPTBot (le crawler d'OpenAI, utilisé pour ChatGPT)
- ChatGPT-User (un autre agent lié à OpenAI)
- Google-Extended (concerne Gemini et les produits IA de Google)
- PerplexityBot (le crawler de Perplexity)
- CCBot (utilisé pour certains jeux de données d'entraînement)
Si à côté d'un de ces noms tu trouves la mention "Disallow: /", cela signifie que tu bloques ce bot sur l'ensemble du site. Si tu vois plutôt "Allow: /" ou si le nom du bot n'apparaît pas du tout, il n'y a généralement pas de blocage explicite.
Un exemple concret de blocage dans le robots.txt GPTBot
Voici à quoi ressemble un blocage typique envers GPTBot :
- User-agent: GPTBot
- Disallow: /
Ces deux lignes, à elles seules, empêchent ChatGPT de lire n'importe quelle page du site. Il arrive souvent qu'elles aient été ajoutées automatiquement par un thème ou un plugin sans que personne ne s'en aperçoive.
Le robots.txt suffit-il pour être sûr de ne pas bloquer les bots IA ?
Non, et c'est un point qui génère de la confusion. Le fichier robots.txt n'est que le premier niveau de contrôle. Il existe d'autres façons dont un site peut bloquer les bots IA sans qu'elles apparaissent dans ce fichier :
- Des règles au niveau du serveur ou du pare-feu (souvent mises en place par l'hébergeur)
- Des plugins de sécurité qui bloquent les user-agents inconnus avant même qu'ils n'atteignent le robots.txt
- Des CDN comme Cloudflare, qui peuvent avoir des paramètres spécifiques pour bloquer les crawlers IA, indépendants du robots.txt
C'est pourquoi, pour être sûr à cent pour cent, il vaut mieux vérifier aussi le panneau de Cloudflare (si tu l'utilises) et demander à ton hébergeur s'il existe des règles de pare-feu actives contre les bots IA. Si tu veux mieux comprendre comment fonctionne la relation entre ton site et ChatGPT, ce guide sur ChatGPT pensé pour les non-techniciens peut t'être utile.
Que faire si tu découvres que tu bloques les bots IA
Si tu trouves des lignes de blocage que tu ne veux plus avoir, la correction est presque toujours simple : il suffit de modifier le fichier robots.txt en supprimant les lignes "Disallow" relatives au bot que tu veux laisser entrer, ou de les remplacer par "Allow: /". Si le fichier est généré automatiquement par un plugin, la modification doit se faire dans les paramètres du plugin lui-même, pas manuellement.
Avant d'intervenir, il vaut cependant la peine de se poser aussi la question inverse : es-tu sûr de vouloir que tous les bots IA lisent ton site ? Pour une activité locale qui vit de réservations directes, par exemple, le choix peut être différent de celui d'une entreprise qui vise à être citée comme source dans les réponses générées par l'IA. Il n'y a pas de réponse valable pour tout le monde, mais c'est une décision à prendre de manière consciente, pas par hasard.
Bloquer les bots IA est-il toujours un mauvais choix ?
Pas nécessairement. Certains sites choisissent de bloquer des bots spécifiques pour des raisons liées aux contenus, à la propriété intellectuelle ou à des considérations commerciales. C'est un choix légitime. Le problème survient quand le blocage n'est pas un choix, mais un effet secondaire non voulu d'un thème, d'un plugin ou d'une configuration héritée de celui qui a créé le site des années plus tôt. Toute la différence réside dans la conscience : savoir ce que tu bloques et pourquoi.
Une vérification périodique en vaut la peine
Le fichier robots.txt peut changer sans préavis, par exemple après une mise à jour du thème, une migration d'hébergement ou l'installation d'un nouveau plugin de sécurité. C'est pourquoi une vérification occasionnelle, par exemple à chaque modification importante du site, aide à éviter les mauvaises surprises. Si tu veux mieux comprendre l'approche globale permettant d'évaluer la visibilité de ton site dans les moteurs traditionnels et les systèmes IA, tu peux consulter la page sur la méthodologie ou jeter un œil aux autres articles du blog.