Cette traduction n’a pas encore été relue par la rédaction. La version allemande fait foi. Deutsche Fassung
SEO
Comment reconnaître une ligne invalide dans le robot.txt?
Un robot.txt indique aux moteurs de recherche quelles zones de votre site ils sont autorisés à récupérer. Google saute les lignes qui sont invalides. Lighthouse avertit qu'un robot invalide.txt peut garder les moteurs de recherche loin des pages publiques ou partager des pages qui ne devraient pas apparaître dans la recherche. Le mode expert vérifie chaque ligne et nomme les lignes invalides avec leur numéro.
Une règle devant l'agent utilisateur ne s'applique pas à un rampeur
Si une instruction est avant la première ligne utilisateur-agent, aucun rampeur ne la suit après phare. Quiconque voulait bloquer une telle zone l'a laissée ouverte. Le robot.txt est également lisible pour tout le monde: qui l'appelle, voit tous les chemins que vous bloquez.
Comment le mode expert vérifie les robots. TXT
Le mode expert charge le site de robots.txt et vérifie chaque ligne pour les erreurs que Lighthouse signale également: un énoncé inconnu, un motif qui ne commence pas avec --/- ou -*-, un -$-- au milieu du motif, un plan du site sans adresse valide et des règles sans agent utilisateur. Pour ce faire, il rapporte des lignes sans colon et des lignes utilisateur-agent vides. Le fichier nomme chaque ligne avec le nombre et la raison.
Lectures Google Le présent règlement
Google prend en charge l'utilisateur-agent, permet, interdit et les champs sitemap. D'autres aiment le ramp-delay. Un chemin commence par "/", et dans le chemin, les majuscules et les minuscules ne comptent pas, au nom du champ. Le caractère "*" représente tout nombre de caractères, "$" pour la fin de l'adresse. Nommer le plan du site avec l'adresse complète, y compris le protocole et le domaine. Ce qui est derrière 500 KiB, Google ne lit plus.
Exemples
Verrouillage pour une zone
Disallow: /intern
User-agent: *
Disalow: /lager-alt
Sitemap: /sitemap.xmlUser-agent: *
Disallow: /intern
Disallow: /lager-alt
Sitemap: https://www.beispiel.at/sitemap.xmlD'abord la ligne utilisateur-agent, puis les règles; le plan du site avec une adresse complète.
- Ouvrez votre robot.txt à l'adresse de votre site web avec /robots.txt à la fin et corrigez les lignes que le fichier mentionne.
- Commencez chaque groupe avec une ligne utilisateur-agent, y compris Autoriser et refuser avec des chemins commençant par "/".
- Vérifiez le fichier dans le rapport robots.txt de Google Search Console.
- Écrivez les instructions exactement comme dans la description de Google: User-agent, Autoriser, Refuser, Plan du site. Une typographie est à peine perceptible lors de la lecture, un examen la trouve immédiatement.




