Google et le Noindex dans le fichier robots.txt
Publié le 26 novembre 2007 par s2m - 143 vue(s) - 
Noter cet article :
Loading ...
Un internaute vient de découvrir que Google prenait en compte une directive nommée "noindex" lorsqu'elle était insérée dans le fichier "robots.txt" d'un site, comme par exemple :
User-agent:Googlebot
Disallow:/perso/
Disallow:/entravaux/
Noindex:/clients/
Alors que la directive "Disallow" indique aux robots de ne pas tenir compte du contenu d'un répertoire...
Source et suite de l'article : http://actu.abondance.com/2007/11/google-teste-la-directive-noindex-dans.html
User-agent:Googlebot
Disallow:/perso/
Disallow:/entravaux/
Noindex:/clients/
Alors que la directive "Disallow" indique aux robots de ne pas tenir compte du contenu d'un répertoire...
Source et suite de l'article : http://actu.abondance.com/2007/11/google-teste-la-directive-noindex-dans.html
Publié dans Archives | No Comments »