기술
robots.txt 생성기
allow/disallow, 사이트맵, crawl-delay를 포함한 유효한 robots.txt를 생성합니다.
검색엔진에 크롤 범위를 알려주세요. 사이트맵 포함 깔끔한 robots.txt를 만드세요.
무료 · 브라우저에서 실행
Paths to block (one per line):
출력
Run this tool
Free daily runs · Pro is unlimited.
사용 방법 robots.txt 생성기
- 모두 허용 또는 경로 차단
- 사이트맵 URL 추가
- robots.txt를 루트에 복사
자주 묻는 질문
어디에 두나요?
도메인 루트, 예: https://example.com/robots.txt
색인을 막나요?
크롤을 제어하며 색인은 제어하지 않습니다. 제외는 noindex로.