Robots.txt kontrolcü
Bir web sitesinin robots.txt dosyası olup olmadığını kontrol edin ve sitemaplarını gözden geçirin ve kuralları kabul etmemeyin.
Paylaş
Benzer araçlar
Bir web sitesi tarafından gönderilen durum kodunu, oluşturulan kayıp sayfayı kontrol edin.
Bir web sayfasının noindex olarak ayarlandığını kontrol eder ve arama motorlarında görünmesini engeller.
Tipik bir GET talebi için bir URL tarafından gönderilen tüm HTTP başlıkları alın.
Popüler araçlar
Web sitesi durum kontrolü.
Özel bir yönlendirmenin 301 ve 302 yönlendirilmesini kontrol edin URL. En fazla 10 yönlendirmeyi kontrol eder.
Belirli bir web sitesinin web host'unu alın.
Herhangi bir web sayfasındaki her meta etiketini getir ve kontrol et.
Bir web sitesinin yeni HTTP/2 protokolü kullandığını veya kullanmadığını kontrol edin.
Bir web sitesinin Brotli Sıkıştırma Algoritmi kullanıp kullanmadığını kontrol edin.