Cette traduction n’a pas encore été relue par la rédaction. La version allemande fait foi. Deutsche Fassung →
Indexierung
Pourquoi le fichier robots.txt et la sitemap ont-ils besoin l'un de l'autre ?
Le fichier robots.txt est le premier fichier qu'un moteur de recherche lit sur votre site web — et c'est là que doit figurer la référence à la sitemap, le table des matières lisible par machine de toutes les pages. Le domaine de contrôle « Indexation » vérifie toute la chaîne : existe-t-il un fichier robots.txt, renvoie-t-il à une sitemap, cette sitemap est-elle accessible, et pointe-t-elle vers le bon domaine.
Le fichier robots.txt comme règlement intérieur de votre site Web
Le fichier robots.txt est un simple fichier texte situé à une adresse fixe : votre-domaine.fr/robots.txt.
Le sitemap comme table des matières
Le sitemap est une liste lisible par machine de toutes les pages de votre site Web.
Échantillon dans la sitemap
De plus, le contrôle effectue un échantillonnage des adresses listées dans le sitemap.
- Ouvrez votre-domaine.fr/robots.txt dans votre navigateur — le fichier doit s'afficher et contenir une ligne « Sitemap: ».
- Ouvrez l'adresse de sitemap indiquée — elle doit pouvoir être chargée et répertorier vos pages actuelles.
- Vérifiez après chaque relance ou changement de domaine que la ligne de sitemap pointe toujours vers le bon domaine.
- Laissez la sitemap être maintenue automatiquement afin que les nouvelles pages y entrent et que les pages supprimées disparaissent.
- Vérifiez qu'aucune règle de blocage dans le fichier robots.txt ne bloque accidentellement les pages importantes.