robots.txt 생성기
사이트용 robots.txt 파일을 생성합니다.
출력
차단할 경로와 사이트맵 참조가 포함된 robots.txt를 만드세요.
사용 방법
- 차단할 경로를 입력하세요.
- 사이트맵 URL을 추가하세요.
- robots.txt를 복사하세요.
자주 묻는 질문
- robots.txt는 어디에 두나요?
- 도메인 루트에 둡니다: /robots.txt.
- 악성 봇도 차단하나요?
- 권고 사항일 뿐이며, 규칙을 준수하는 크롤러만 따릅니다.
사이트용 robots.txt 파일을 생성합니다.
차단할 경로와 사이트맵 참조가 포함된 robots.txt를 만드세요.