Aide-mémoire / Cheat Sheet sur le fichier robots.txt
Trouvé le 19 juin 2012 à 8:06 par Maxime - 1 772 vues
Le site The Web Robots Pages considéré comme étant la documentation officielle sur le protocole d’exclusion des robots via le fichier robots.txt n’étant plus à jour depuis quelques années et de surcroît en anglais, il existe un site d’aide mémoire en français et à jour, toujours utile à garder sous le coude : robots-txt.com.
Le site robots-txt.com rassemble toutes les informations sur la mise en place d’un fichier robots.txt. Vous y trouverez par exemple des ressources spécifiques à certains moteurs de recherche, certains CMS ou encore des ressources dédiées à des implémentations techniques particulières (serveur HTTPS, sous-domaines, etc).
<- Actualité précédente: L’outil ultime pour le référencement
->Actualité suivante: Elaboration de contenus positifs en vue d’un regain de notoriété sur Internet
Publié dans Sources diverses, Techniques et Conseils |
Découvrez les articles sur le même thème
- Comment obtenir la liste des URL indexées par Google en HTTP et HTTPS ? Vidéo SEO - ( 29 août 2017) - 690 vues
- Temps de chargement : un levier indispensable pour votre SEO - ( 26 septembre 2017) - 588 vues
- Définition : Le Linkbaiting, c’est quoi ? - ( 13 septembre 2017) - 516 vues
- Définition : Un EMD, c’est quoi ? - ( 30 août 2017) - 537 vues
- Infographie : Les 4 Piliers de l’Analyse Sémantique - ( 15 septembre 2017) - 564 vues
- Comment Surfer sur le Trafic de ses Concurrents : La Méthode du Référencement PAS Naturel - ( 25 août 2017) - 833 vues
- Infographie : 30 statistiques SEO (récentes) à connaître - ( 8 septembre 2017) - 756 vues