Aide-mémoire / Cheat Sheet sur le fichier robots.txt
Trouvé le 19 juin 2012 à 8:06 par Maxime - 1936 vues
Le site The Web Robots Pages considéré comme étant la documentation officielle sur le protocole d’exclusion des robots via le fichier robots.txt n’étant plus à jour depuis quelques années et de surcroît en anglais, il existe un site d’aide mémoire en français et à jour, toujours utile à garder sous le coude : robots-txt.com.
Le site robots-txt.com rassemble toutes les informations sur la mise en place d’un fichier robots.txt. Vous y trouverez par exemple des ressources spécifiques à certains moteurs de recherche, certains CMS ou encore des ressources dédiées à des implémentations techniques particulières (serveur HTTPS, sous-domaines, etc).
<- Actualité précédente: L’outil ultime pour le référencement
->Actualité suivante: Elaboration de contenus positifs en vue d’un regain de notoriété sur Internet
Publié dans Sources diverses, Techniques et Conseils |
Découvrez les articles sur le même thème
- Le guide ultime pour optimiser son référencement mobile - ( 25 mars 2019) - 752 vues
- Le guide ultime pour optimiser son référencement mobile - ( 1 avril 2019) - 439 vues
- HTTPS : le guide pour sécuriser son site en utilisant un certificat SSL ? - ( 3 avril 2019) - 745 vues
- Générez un sitemap et améliorez l’exploration de votre site par les robots - ( 27 mars 2019) - 630 vues
- Infographie : Propulsez vos ventes en magasin grâce à Internet - ( 3 avril 2019) - 663 vues
- Comment répondre aux critères de Google Panda grâce à un contenu de qualité ? - ( 14 mai 2019) - 606 vues
- Google Shopping : Petit Tuto. sur le Gestionnaire de règles de GMC - ( 29 avril 2019) - 528 vues