ChatGPT peut visiter vos pages interdites, et OpenAI l'assume
Ce qu'il faut retenir :
- En Europe, environ 15 % des bots IA de type "fetcher" identifiés ont accédé à des URL pourtant marquées comme interdites.
- ChatGPT-User, Bytespider et Youbot sont les principaux responsables : chacun a atteint des pages interdites sur près de la moitié des sites européens qui les avaient explicitement bloqués, ChatGPT-User en tête.
- OpenAI justifie ce comportement par le fait que ChatGPT-User agit à la demande d'un utilisateur, ce qui le distinguerait d'un crawl classique soumis au robots.txt. Perplexity avance le même argument pour Perplexity-User, tandis qu'Anthropic affirme que ses trois bots respectent tous le fichier.
- Bloquer ChatGPT-User ne bloque pas OAI-SearchBot, l'agent qui décide si un site apparaît dans les résultats de recherche de ChatGPT. Un site qui interdit les deux pense couper tout trafic IA, mais perd la visibilité côté recherche sans gagner en protection côté fetch.
Le rapport State of the Bots de TollBit, qui compile les données du premier semestre 2026, montre aussi que la situation varie beaucoup selon les agents. Claude-User n'est bloqué que par 9 % des sites européens, contre 26 % en Amérique du Nord. Perplexity-User affiche 13 % contre 26 %. La plupart des agents récents ont des taux de blocage à un chiffre en Europe, mais ChatGPT-User fait figure d'exception, à la fois très bloqué et très souvent contourné malgré ce blocage.
