Saltar para o conteúdo
EUID Serviço de auditoria & selo, Página inicial
Mandar auditar o seu sítio

Esta tradução ainda não foi revista editorialmente. A versão alemã é vinculativa. Deutsche Fassung

SEO

Como posso reconhecer uma linha inválida no robots.txt?

Um robots.txt diz aos motores de busca quais áreas do seu site eles podem recuperar. Google ignora linhas que são inválidas. Lighthouse adverte que um robots.txt inválido pode manter os motores de busca longe de páginas públicas ou compartilhar páginas que não devem aparecer na pesquisa. O modo Expert verifica cada linha e nomes inválidos com seu número.

Uma regra antes do agente de usuário não se aplica a um rastreador

Se uma instrução é antes da primeira linha usuário-agente, nenhum rastreador segue após Lighthouse. Quem quisesse bloquear tal área deixou-a aberta. O robots.txt também é legível para todos: quem o chama, vê todos os caminhos que você bloqueia.

Como o modo especialista verifica os robôs. txt

O modo Expert carrega o robots.txt do site e verifica cada linha por erros que o Lighthouse também relata: declaração desconhecida, um padrão que não começa com “/” ou “*”, um “$” no meio do padrão, um mapa do site sem um endereço válido e regras sem um agente de usuário. Para fazer isso, ele relata linhas sem pontos e linhas de usuário-agente vazias. Os nomes dos arquivos de cada linha com número e razão.

Google Reads Estas Regras

O Google suporta os campos user-agent, permit, disallow e sitemap. Outros, como o atraso, sobrepõem-no. Um caminho começa com "/", e no caminho, maiúsculas e minúsculas não contam, em nome do campo. O caractere "*" representa qualquer número de caracteres, "$" para o fim do endereço. Nomeie o mapa do site com o endereço completo, incluindo protocolo e domínio. O que está por trás de 500 KiB, Google não lê mais.

Exemplos

Bloquear para uma área

Não encontrado
Disallow: /intern
User-agent: *
Disalow: /lager-alt
Sitemap: /sitemap.xml
Realizado
User-agent: *
Disallow: /intern
Disallow: /lager-alt
Sitemap: https://www.beispiel.at/sitemap.xml

Primeiro a linha usuário-agente, depois as regras; o mapa do site com um endereço completo.

  • Abra seu robots.txt no endereço do seu site com /robots.txt no final e corrija as linhas que o arquivo menciona.
  • Iniciar cada grupo com uma linha usuário- agente, incluindo Permitir e Desallow com caminhos a partir de "/".
  • Verifique o arquivo no relatório robots.txt do Google Search Console.
  • Escreva as instruções exatamente como na descrição do Google: User-agent, Allow, Disallow, Sitemap. Um erro de digitação dificilmente é perceptível quando se lê, um exame o encontra imediatamente.

Deutsche Fassung dieser Seite

  • Selo Digitale Barrierefreiheit
  • Selo Daten & Recht
  • Selo Technische Qualität
  • Selo Digital Excellence
  • Selo Cyberversicherung

Auditado. Por um futuro digital melhor.euid.com