# robots.txt pour le site http://www.lacordevocale.org # # - Les lignes commençant par # sont des commentaires. # # - Le fichiers robots.txt ne doit pas contenir de lignes blanches. # # - Il est possible d'interdire ou d'autoriser l'accès de certaines pages # à un moteur (spider) spécifique # # # pour interdire à tous les spider l'accès au répertoire noel # User-agent: * # Disallow: /noel/ # # pour interdire uniquement au spider de google l'accès à tous les répertoires # User-agent: googlebot # Disallow: /