Sites Web : Comment bloquer les crawlers IA qui pillent votre site sans vous demander la permission ? - Site d’actualité geek, informatique et high tech - Korben.info

Publié le lundi 6 octobre 2008

⇒ https://korben.info/

Blog portant sur l’actualité informatique, geek et high-tech

Comment bloquer les crawlers IA qui pillent votre site sans vous demander la permission ?

https://korben.info/bloquer-crawlers-ia-robots-txt-htaccess-nginx/bloquer-crawlers-ia-robots-txt-htaccess-nginx-1.png
Décembre 2025, Par Korben

Vous en avez marre de voir GPTBot, ClaudeBot et toute la bande de crawlers IA se servir sur votre site comme dans un buffet à volonté ? Perso, j’utilise Cloudflare qui propose des options pour ça directement mais tout le monde n’utilise pas ce service. Du coup ce projet ai.robots.txt est super (…)

→ Lire la suite sur le site d’origine…


Revenir en haut