Référencement site web dans Google

viaudv Messages postés 5 Statut Membre -  
bg62 Messages postés 23433 Date d'inscription   Statut Modérateur Dernière intervention   -
Bonjour à tous,

Voila Google refuse d'explorer mon siteweb www.rvvgea2014.ensma.fr soi-disant le fichier robot.txt est inaccessible.

Ce que je ne comprends pas c'est que le fichier robot.txt n'est pas indispensable pour l'exploration, il permet juste de restreindre certaines parties du siteweb lors de l'exploration par le robot google.

Voila si vous pouviez m'éclairer sur le sujet ce serait sympa car il faut que je référence le site le plus rapidement possible.

4 réponses

  1. elgazar Messages postés 5776 Date d'inscription   Statut Membre Dernière intervention   1 330
     
    tu est certain du message ? D'habitude, il prévient seulement si le fichier robots bloque l'indexation car pour lui ce n'est pas logique ( à juste titre) de vouloir indexer un site dont le webmaster bloque tout le référencement, du coup je pencherais plutôt pour une erreur d'écriture dans ton robots.txt

    normalement ton robots.txt se trouve à la racine de ton site et doit apparaitre en tapant directement l'url or il n'apparait pas sur ton site
    0
  2. viaudv Messages postés 5 Statut Membre
     
    Il me dit dans les webmaster tools:

    "Nous n'avons pas pu explorer votre site en raison de l'impossibilité d'accéder au fichier robots.txt de ce dernier."

    Du coup il faut que je rajoute un fichier robot.txt à la racine?
    0
  3. animostab Messages postés 3003 Date d'inscription   Statut Membre Dernière intervention   738
     
    Salut
    Déjà ce n'est pas robot.txt mais robots.txt
    Dedans tu mets

    User-Agent: *
    Disallow:

    aucune ligne vide dans ce fichier

    Le problème doit venir d'un mauvaise configuration car si on tape
    www.rvvgea2014.ensma.fr/robots.txt
    ou
    www.rvvgea2014.ensma.fr/nimportequoi.html

    Cela renvoie une erreur 500 (mauvaise configuration serveur) au lieu d'une erreur 404 (page introuvable) d'ou peut être le désarroi de googlebot et autres bots
    0
  4. viaudv Messages postés 5 Statut Membre
     
    Super j'ai ajouté le robots.txt avec ce que tu m'as donné et j'ai réussi à envoyer le site pour indexation.

    Merci beaucoup pour la rapidité de votre réponse!
    0
    1. animostab Messages postés 3003 Date d'inscription   Statut Membre Dernière intervention   738
       
      Ok cependant il existe le problème de configuration du 404
      Si tu as un fichier .htaccess vérifie le

      sinon
      tu peux créer une page nommée par exemple 404.html dans lequel tu mets un texte l"a page n'existe pas ..." et un lien vers la page d'accueil

      tu crées avec le blocnote un fichier nommé htaccess.txt et tu mets cette ligne
      ErrorDocument 404 /404.thml

      ensuite tu met le fichier à la racine du site et tu le renomme .htaccess (sans oublier le point avant)

      voir cette page http://www.conseil-creation.com/informatique/internet/htaccess_erreurs.php

      si quand tu tape une adresse qui n'existe pas genre www.rvvgea2014.ensma.fr/nimportequoi.html
      et que ca affiche toujours une erreur 500 c'est une erreur dans la configuration du serveur

      pour afficher la configuration de ton serveur tu crée une page que tu nomme par exemple displayinfos.php (avec l'extension .php)
      dedans tu mets
      <?php
      phpinfo();
      ?>

      tu l'envois à la racine du site

      puis ouvre la page
      www.rvvgea2014.ensma.fr/displayinfos.php

      ca affiche la configuration du serveur
      vérifier si il y a cette ligne
      ErrorDocument? 404 /missing.html
      0
    2. viaudv Messages postés 5 Statut Membre
       
      Je n'ai pas la ligne "ErrorDocument? 404 /missing.html" et ça me renvoie toujours l'erreur 500, même en ayant ajouté le .htaccess et le 404.html.

      Du coup comment il faut configurer le serveur?
      0
    3. animostab Messages postés 3003 Date d'inscription   Statut Membre Dernière intervention   738
       
      Si comme je le suppose tu n'as pas un heberement avec un serveur dédié tu ne peux rien faire à part contacter le service technique de ton hebergement et leur signaler le problème
      0
    4. viaudv Messages postés 5 Statut Membre
       
      C'est le cas, merci encore, je vais les contacter demain et voir avec eux pour régler le problème, je reviendrais vous tenir au courant si le problème est réglé ou non afin que ça serve pour plus tard.
      0
    5. bg62 Messages postés 23433 Date d'inscription   Statut Modérateur Dernière intervention   2 435
       
      erreur 500 = hébergeur = prendre contact !
      0