robots.txt 뷰어

온라인 robots.txt 열람 도구입니다. 도메인을 입력하면 사이트의 robots.txt를 가져와 분석하고, User-agent별로 Allow/Disallow 규칙, Sitemap 주소, 크롤 지연을 보여줍니다. 크롤러 규칙 점검과 SEO 검사에 자주 쓰입니다.