This translation has not been editorially reviewed yet. The German version is authoritative. Deutsche Fassung
robots.txt и Карта на сайта: двата файла, които контролират достъпа
Проверява се дали robots.txt посочва карта на сайта и дали може да бъде достигната. robots.txt контролира това, което може да се нарече; Картата на сайта казва това, което изобщо има две различни задачи, които често са объркани.
- Най-често срещаната грешка е препратка към карта на сайта, която вече не съществува или която е на друг хост. Проверяващият докладва и двете, защото мъртва справка има същия ефект като никоя.
- Второто най-често е изключване, че блокира твърде много гол като директория на стил шаблони и скриптове. След това търсачките не могат да показват страницата правилно и да я оценят съответно.
- Самата услуга за проверка се придържа към този файл: тя не извлича адреси, че тя блокира за своя продукт символ и изрично посочва изключването в резултат, вместо да го представи като липсващо съдържание.




