Crawler qui visite mon site et incapable de les bloquer.
Fermé
formationsecurite
Messages postés
29
Date d'inscription
samedi 18 octobre 2014
Statut
Membre
Dernière intervention
18 mars 2017
-
14 juil. 2015 à 03:07
formationsecurite Messages postés 29 Date d'inscription samedi 18 octobre 2014 Statut Membre Dernière intervention 18 mars 2017 - 14 juil. 2015 à 18:37
formationsecurite Messages postés 29 Date d'inscription samedi 18 octobre 2014 Statut Membre Dernière intervention 18 mars 2017 - 14 juil. 2015 à 18:37
A voir également:
- Crawler qui visite mon site et incapable de les bloquer.
- Qui visite mon profil facebook - Guide
- Site de telechargement - Guide
- Qui visite mon profil instagram - Guide
- Site de vente entre particulier - Guide
- Site inaccessible - Guide
1 réponse
animostab
Messages postés
2829
Date d'inscription
jeudi 10 mars 2005
Statut
Membre
Dernière intervention
11 novembre 2019
738
14 juil. 2015 à 16:40
14 juil. 2015 à 16:40
Salut
j'avais suivi la discussion sur ton problème
bon si tout ne marche pas il y a toujours en dernier recours la solution du black hole
https://perishablepress.com/blackhole-bad-bots/
la technique : les crawler qui ne suivent pas les règles du fichier robots.txt (donc tous les badbots) suivent un lien caché vers une page qui fais une requête whois et ecrit les infos dans un fichier dat qui va ecrire les règles d'exclusion dans le .htaccess
j'avais suivi la discussion sur ton problème
bon si tout ne marche pas il y a toujours en dernier recours la solution du black hole
https://perishablepress.com/blackhole-bad-bots/
la technique : les crawler qui ne suivent pas les règles du fichier robots.txt (donc tous les badbots) suivent un lien caché vers une page qui fais une requête whois et ecrit les infos dans un fichier dat qui va ecrire les règles d'exclusion dans le .htaccess
14 juil. 2015 à 18:37
Je vais regarder cette solution car je suis désespéré.
Merci