Qu'est ce que je dois mettre dans le fichier robots.txt Résolu/Fermé

Question

Bonjour,
Je veut savoir qu'est ce que je dois mettre dans le fichier robots.txt
J'ai ce code :
User-agent: *Disallow: /wp-admin/Allow: /wp-admin/admin-ajax.php
 est ce que je peut ajoutée ces lignes suivants : 
User-agent: *Disallow: /wp-admin/Allow: /wp-admin/admin-ajax.phpUser-Agent: GooglebotAllow: /User-Agent: Googlebot-MobileAllow: /User-Agent: Googlebot-ImageAllow: /User-Agent: Mediapartners-GoogleAllow: /User-Agent: Adsbot-GoogleAllow: /User-Agent: SlurpAllow: /User-Agent: msnbotAllow: /User-Agent: msnbot-mediaAllow: /User-Agent: TeomaAllow: /

ou bien qu'est ce que je dois mettre dans ce fichier

merci d'avance

elgazar · Answer

Bonjour
 cela ne sert a rien de mettre des allow car si ce n'est pas interdit par disallow, c'est forcément autorisé

a ta place je ne modifierais pas le code d'origine  puisqu'il interdit  à tous les moteurs l'indexation de wp-admin a l'exception du fichier admin-ajax (pourquoi ce fichier ? )
 
Avec un ordinateur, on peut faire plus rapidement des choses qu’on n’aurait pas eu besoin de faire sans ordinateur.

Qu'est ce que je dois mettre dans le fichier robots.txt

1 réponse

Discussions similaires