Demande d'information/ pb indexation robots.txt Fermé

Question

Bonjour à tous,

Je viens de creer un site d'information de 3 pages  via un editeur wysiwyg proposé par Gandi ( auprés de qui j'ai également mon nom de domaine ) .
Le site est récent puisque je l'ai publié il y'  a 2 jours.
Cependant, celui ci n'est pas ( encore?) indexé.
Ce message apparait sous le nom du site : " La description de ce résultat n'est pas accessible à cause du fichier robots.txt de ce site."

En vérifiant voici ce que j'obtiens :

User-agent: *
Disallow: /assets/
Crawl-Delay: 300

Est ce simplement parce que le site vient tout juste d'être en ligne ( ce que je suppose )?
Ou dois-je transformer le "Disallow" en "Allow" ( mais je n'ai pas accés aux codes HTML , donc c'est problématique )

Merci par avance du temps que vous passerez à me répondre.

Philippe

animostab · Answer

salut
Crawl-Delay: 300
déjà c'est un peu trop (5 mn entre chaque requete) ensuite google ne comprend pas cette ligne. Laisse les robots gerer leur vitesse de requêtes donc supprimes cette ligne.

je suppose que le répertoire assets c'est tes CSS. Google recommande de laisser son robot acceder aux css

donc moi je mettrais juste
User-agent: *
Disallow:

Après 2 jours c'est pas beaucoup, donne l'url de ton site pour voir l'etat d'indexation

bg62 · Answer

lut;)
première réaction quand je vois ceci:
"Le site est récent puisque je l'ai publié il y' a 2 jours.
Cependant, celui ci n'est pas ( encore?) indexé. "
= ben encore heureux !!!
2 jours et déjà la panique ???
rien qu'en voyant le simple contenu de ton fichier 'robots.txt' l'on a tout compris, alors ...COOOOOOOL et pas de panique
vois plutôt ceci 
https://forums.commentcamarche.net/forum/affich-37584857-proteger-un-site-web-en-construction
ET ensuite, seulement, tu pourras alors le lancer sur la grande tile ...
@+

Demande d'information/ pb indexation robots.txt

2 réponses

Discussions similaires