Aide-mémoire / Cheat Sheet sur le fichier robots.txt
Trouvé le 19 juin 2012 à 8:06 par Maxime - 1862 vues
Le site The Web Robots Pages considéré comme étant la documentation officielle sur le protocole d’exclusion des robots via le fichier robots.txt n’étant plus à jour depuis quelques années et de surcroît en anglais, il existe un site d’aide mémoire en français et à jour, toujours utile à garder sous le coude : robots-txt.com.
Le site robots-txt.com rassemble toutes les informations sur la mise en place d’un fichier robots.txt. Vous y trouverez par exemple des ressources spécifiques à certains moteurs de recherche, certains CMS ou encore des ressources dédiées à des implémentations techniques particulières (serveur HTTPS, sous-domaines, etc).
<- Actualité précédente: L’outil ultime pour le référencement
->Actualité suivante: Elaboration de contenus positifs en vue d’un regain de notoriété sur Internet
Publié dans Sources diverses, Techniques et Conseils |
Découvrez les articles sur le même thème
- Mise à jour de l’algorithme de Google: quelles répercussions? - ( 6 août 2018) - 846 vues
- Infographie : 35 actions pour accélérer son site - ( 15 juin 2018) - 575 vues
- Comment garder la motivation en référencement ? - ( 7 août 2018) - 578 vues
- Assurer une bonne délivrabilité sur Gmail - ( 2 juillet 2018) - 459 vues
- Comment il a déclenché un buzz, avec un seul article de blog. - ( 29 juin 2018) - 844 vues
- Générer des milliers de visiteurs avec des mots-clés de longue traîne - ( 21 juin 2018) - 685 vues
- PageSpeed Insights : le meilleur outil pour préparer votre site web à la Speed Update ? - ( 21 juin 2018) - 561 vues