Tag: robots.txt
Robots.txt (le Protocole d’Exclusion des Robots) est un fichier texte placé dans la racine d’un site web de domaine à donner des instructions et aux robots web (tels que les robots des moteurs de recherche) sur les pages que pour l’analyse et l’analyse pas, ainsi que d’autres informations comme l’emplacement du plan Sitemap. Moderne cadres, il peut être utile de programmation pour générer le fichier. Questions générales sur l’Optimisation des Moteurs de Recherche sont plus appropriées sur les Webmasters StackExchange site.