Проверка robots.txt

Проверьте, есть ли у веб-сайта файл robots.txt и пересмотрите его карту сайта и запретите правила.

Аналогичные инструменты

Проверьте код состояния, возвращенный веб-сайтом для генерируемой отсутствующей страницы.

Проверяет, настраивается ли веб-страница на noindex, что мешает ей появляться в поисковых системах.

Получить все заголовки HTTP, которые возвращает URL для типичного запроса GET.

609

Проверка состояния сайта.

7 597 368

Проверяйте 301 и 302 перенаправления конкретного сайта URL. Он будет проверять до 10 перенаправлений.

1 306

Получить веб-хостинг данного сайта.

1 258

Приведи и проверь все мета-теги на любой веб-странице.

1 167

Проверьте, использует ли веб-сайт новый протокол HTTP/2.

1 141

Проверьте, использует ли сайт алгоритм сжатия Бротли или нет.

1 088