TDMRep : attention aux erreurs courantes qui rendent ineffective votre opposition face aux bots IA
Rappelons que bloquer les bots IA à l’aide d’un fichier robots.txt ou d’une balise meta ou d’une directive dans l’en-tête http n’a pas de véritable portée juridique. Le protocole d’exclusion des robots, écrit en 1994 par Martijn Koster pour éviter que les serveurs ne s’effondrent sous la charge, ne sert que pour indiquer des directives … Lire plus