Comprendre Robots crawl de Google?

Résolu
gwenm Messages postés 640 Statut Membre -  
bg62 Messages postés 23433 Date d'inscription   Statut Modérateur Dernière intervention   -
Bonjour,

J' aimerais savoir ce que vous comprenez à cette image:
http://nsa28.casimages.com/img/2011/08/12/110812050150761247.jpg

- est ce que cela veut dire que google est passé le 3 aout et pas repassé depuis?
- et le Updated Aug 11, 2011(Mise à jour le 11 août 2011) ca veut dire quoi?

1 réponse

  1. bg62 Messages postés 23433 Date d'inscription   Statut Modérateur Dernière intervention   2 435
     
    ton 'lien' est interdit d'accés par une ligne dans 'robots.txt', google en passant le 3 s'en est rendu compte, est repassé le 11 et a vu la même chose, donc n'a pas accédé à celui-ci :)
    0
    1. gwenm Messages postés 640 Statut Membre 30
       
      Voici mon robots.txt:
      User-agent: *
      Allow: /
      Disallow: /wp-
      Disallow: /*.php$
      Disallow: /*.js$
      Disallow: /*.inc$
      Disallow: /*.css$
      Disallow: /*PHPSESSID=

      Il est pourtant bon?
      0
    2. bg62 Messages postés 23433 Date d'inscription   Statut Modérateur Dernière intervention   2 435
       
      il interdit tous les fichiers en php, js, css déjà ... donc !!!
      0
    3. gwenm Messages postés 640 Statut Membre 30
       
      Il faut que je garde tout ca alors..?
      User-agent: *
      Allow: /
      Disallow: /wp-
      0
    4. bg62 Messages postés 23433 Date d'inscription   Statut Modérateur Dernière intervention   2 435
       
      dans ce cas autant laisser ce fichier totalement vierge, cela fera le même effet ;)
      0
    5. gwenm Messages postés 640 Statut Membre 30
       
      Merci pour ton aide bg62!
      0