Robots.txt controller

Controleer of een website een robots.txt-bestand heeft en bekijk de sitemap en verbied regels.

Deel

Gelijkaardige tools

404 pagina controller

Controleer de statuscode die door een website wordt teruggestuurd voor een ontbrekende pagina.

31
Noindex-controleerder

Controleert of een webpagina is ingesteld op noindex, zodat deze niet in zoekmachines verschijnt.

44
HTTP opzoek naar koppen

Verzamel alle HTTP koppen die een URL teruggeeft voor een typisch GET-verzoek.

609

Populaire tools