robots.txt 분석기

robots.txt 파일을 붙여넣어 봇 그룹, Allow/Disallow 규칙, Crawl-delay 지시어, Sitemap 항목을 확인하세요. 각 크롤러가 규칙에 따라 허용되는지 시뮬레이션할 수 있습니다. URL을 외부로 전송하지 않으며, 모든 처리는 브라우저에서 이루어집니다.

Related tools