Ceci est une ancienne révision du document !

Robots.txt

Fichier servant de directive aux robots d'indexation.

Ne rien référencer, pour tout les robots.

User-agent: *
Disallow: /

Ne pas référencer un répertoire ou page, juste pour GoogleBot.

User-agent: Googlebot
Disallow: /repertoire-a/
Disallow: /page-b.html

Attention ! Ce fichier est public, n'importe qui peut voir son contenu. Attention à ce que vous mettez (dossiers sensibles par exemple).