crawler qui visite mon site et incapable de les bloquer.

Question

htacces: marche pas
wordfence: marche pas
google analytics: marche pas (pour ne pas en tenir compte) 
Cpanel: marche pas

J'ai tout tenter pour bloquer les crawlers qui visites mon site www.formationsecurtie.ca mais ils polluent mon site et me donne un taux de rebond effarent.

Auriez-vous une idée?

animostab · Answer

Salut
j'avais suivi la discussion sur ton problème
bon si tout ne marche pas il y a toujours en dernier recours la solution du black hole
https://perishablepress.com/blackhole-bad-bots/
la technique : les crawler qui ne suivent pas les règles du fichier robots.txt (donc tous les badbots) suivent un lien caché vers une page qui fais une requête whois et ecrit les infos dans un fichier dat qui va ecrire les règles d'exclusion dans le .htaccess

Crawler qui visite mon site et incapable de les bloquer.

1 réponse

Votre réponse

Discussions similaires