Webmaster ⇒ SEO référencement facebook twitter youtube

Fichier robots.txt | Fichier robots.txt


Le fichier robots.txt ne doit contenir aucune ligne vide.

  • User-Agent: indique quel robot est concerné par les lignes d'instructions suivantes. (* Pour tous les robots)
  • Disallow: Indique quelle page ou répertoire ne doit pas être indexé et doit être sur une ligne à part et doit commencer par un /.
  • * signifie "tous les moteurs de recherche".
  • # :Est une ligne de commentaire et ne sera pas interprétée.

Exemples de fichier:

-On interdit l'indexation du dossier repertoire et du chemin /repertoire/page.html à tout les robots.
-On insère une ligne de commentaire pour si retrouver.
-On interdit l'indexation de tout le site au robot googlebot.

-On interdit l'indexation de tout le site à tout les robots.

-On interdit l'indexation de toute les pages au robot googlebot et on l'autorise à tout les autres.

Exemple de fichier

User-Agent: *
Disallow: /repertoire/
Disallow: /repertoire/page.html
# Ligne de commentaire
User-agent: googlebot
Disallow: /
  • User-Agent: indique quel robot est concerné par les lignes d'instructions suivantes. (* Pour tous les robots)
  • Disallow: Indique quelle page ou quel répertoire ne doit pas être indexé.
  • # Est une ligne de commentaire et ne sera pas interprétée.

Autres exemple de robots.txt

On interdit l'indexation de tout le site à tout les robots:

User-Agent: *
Disallow: /

On interdit l'indexation de toute les pages au robot googlebot et on l'autorise à tout les autres:

User-Agent: googlebot
Disallow: /
User-agent: *
Disallow: 




>
Changer le fond
Oregionale Skin
7astuces
Sélectionnez un Fond (11)
7astuces 7astuces 7astuces 7astuces 7astuces 7astuces 7astuces 7astuces 7astuces 7astuces 7astuces
Fond de contenu
7astuces 7astuces 7astuces 7astuces 7astuces 7astuces 7astuces 7astuces 7astuces 7astuces 7astuces 7astuces 7astuces 7astuces 7astuces 7astuces 7astuces 7astuces 7astuces 7astuces