로봇.txt 확인기

웹 사이트가 robots.txt 파일을 가지고 있는지 확인하고 사이트 지도를 검토하고 규칙을 거부하십시오.

유사한 도구

웹 사이트에서 생성된 실종 페이지에 대한 상태 코드를 확인하십시오.

웹 페이지가 noindex로 설정되어 있는지 확인하여 검색 엔진에 표시되지 않도록합니다.

일반적인 GET 요청에 대해 URL가 반환하는 모든 HTTP 헤더를 얻으십시오.

609

웹 사이트 상태 검사

7,597,368

특정 중 301 & 302의 리디렉션을 확인합니다 URL. 최대 10개의 리디렉션을 확인합니다.

1,306

특정 웹 사이트의 웹 호스트를 얻으십시오.

1,258

웹 페이지의 모든 메타 태그를 가져와 확인하세요.

1,167

웹사이트가 새로운 HTTP/2 프로토콜을 사용하고 있는지 여부를 확인합니다.

1,141

웹 사이트가 브로틀리 압축 알고리즘을 사용하고 있는지 여부를 확인하십시오.

1,088