🤖 robots.txt 생성기

검색 크롤러 접근 제어 파일을 시각적으로 생성합니다.

프리셋
Sitemap URL
크롤러 규칙
크롤 딜레이 (선택)
💡 robots.txt는 사이트 루트(/)에 위치해야 합니다. 검색엔진에게만 지시사항이며 보안 수단은 아닙니다.
생성된 robots.txt

📖 사용방법

  1. 허용/차단할 User-agent(검색봇)를 선택합니다. * 는 모든 봇에 적용됩니다.
  2. 차단할 URL 경로를 Disallow에 입력합니다. 예: /admin/, /private/
  3. 허용할 경로는 Allow에 입력합니다.
  4. Sitemap URL을 입력하면 자동으로 추가됩니다.
  5. 생성된 robots.txt 내용을 복사해서 웹사이트 루트 디렉토리에 저장합니다.