Проверка роботів.txt

Перевірте, чи є у веб-сайту файл robots.txt і перегляньте його мапу сайту і не допускайте правила.

Ділитися

Подібні інструменти

перевірка 404 сторінки

Перевірте код статусу, який повертається веб-сайтом для генерованої відсутньої сторінки.

31
Контролер Noindex

Перевірка того, чи веб-сторінка встановлена на noindex, запобігаючи її з'явленню в пошукових системах.

44
HTTP пошук заголовків

Знайдіть всі HTTP заголовки, які URL повертає для типового запиту GET.

609

Популярні інструменти