Robots.txt kontrolcü

Bir web sitesinin robots.txt dosyası olup olmadığını kontrol edin ve sitemaplarını gözden geçirin ve kuralları kabul etmemeyin.

Paylaş

Benzer araçlar

404 sayfa kontrolcü

Bir web sitesi tarafından gönderilen durum kodunu, oluşturulan kayıp sayfayı kontrol edin.

31
Noindex kontrolörü

Bir web sayfasının noindex olarak ayarlandığını kontrol eder ve arama motorlarında görünmesini engeller.

44
HTTP başlıkları aramak

Tipik bir GET talebi için bir URL tarafından gönderilen tüm HTTP başlıkları alın.

609

Popüler araçlar