robots.txt는 어디에 두나요?

사이트 루트에 저장: https://www.example.com/robots.txt. 크롤러는 그 경로만 가져옵니다. 하위 디렉터리 파일은 무시됩니다.

Allow와 Disallow의 차이는?

Disallow는 건너뛸 경로 접두사, Allow는 가져올 수 있는 접두사입니다. 상위 경로가 disallow일 때 유용합니다. 이 생성기에서 경로 목록이 비어 있으면 기본은 Allow: / (전체 사이트)입니다.

robots.txt로 Google에서 페이지를 숨기나요?

아니요. 크롤러에게 해당 URL 가져오기를 요청하지 말라고 할 뿐입니다. 다른 곳에서 링크되면 검색에 나올 수 있습니다. 결과에서 제외하려면 페이지에 noindex를 사용하세요.

Sitemap 줄을 추가해야 하나요?

XML sitemap이 있으면 예. Sitemap: 지시는 User-agent 그룹과 별개이며 Google, Bing 등이 URL을 찾는 데 도움이 됩니다. 절대 https URL을 사용하세요.

Crawl-delay가 포함되나요?

아니요. Google은 Crawl-delay를 무시합니다. Googlebot 속도 조절은 Search Console 크롤 설정을 사용하세요. 이 생성기는 User-agent, Allow, Disallow, Sitemap만 다룹니다.

파일이 기기 밖으로 나가나요?

아니요. Robots.txt 생성기는 브라우저에서만 동작하며, 경로와 sitemap URL은 업로드되거나 저장되지 않습니다.

SEO 도구

Robots.txt 생성기

브라우저에서 robots.txt를 만듭니다.

프리셋

일반 파일에서 시작한 다음 경로를 편집하거나 사이트맵을 추가하세요 URL.

사용자 에이전트

모든 크롤러에는 *를 사용하거나 Googlebot과 같은 이름을 사용하세요.

경로를 허용하지 않음

경로 허용

사이트맵 URL

선택 과목. Sitemap으로 작성: 파일 끝에 있는 줄.

robots.txt

User-agent: *
Allow: /

2 라인

이 파일을 사이트 루트(example.com/robots.txt)에 robots.txt로 저장하세요.

Robots.txt 생성기 정보

브라우저에서 robots.txt를 만듭니다. 전체 허용, 전체 차단, admin 차단 중에서 시작한 뒤 User-agent, Allow, Disallow 경로를 편집하고 선택적으로 sitemap URL을 추가합니다. 파일을 복사해 사이트 루트에 저장하면 크롤러가 가져올 수 있는 범위를 알 수 있습니다. 업로드되지 않습니다.

Robots.txt 생성기 사용 방법

프리셋 선택: 전체 허용, 전체 차단, admin 차단.
* 대신 특정 크롤러가 필요하면 User-agent를 편집합니다.
Disallow 및 Allow 경로를 추가·변경합니다(한 줄에 하나).
선택적으로 sitemap URL을 붙여 넣습니다.
robots.txt 출력을 복사해 https://your-domain/robots.txt 에 저장합니다.

Robots.txt 생성기 예시

공개 사이트, 전체 허용

전체 허용 프리셋은 User-agent: * 와 Allow: / 를 출력합니다. sitemap URL을 추가하면 같은 파일에서 XML sitemap을 찾을 수 있습니다.

스테이징, 모든 크롤러 차단

전체 차단 프리셋은 Disallow: / 를 출력해 Googlebot 등이 스테이징·비공개 호스트에 들어오지 않게 합니다. 호스트가 공개될 수 있으면 noindex와 함께 쓰세요.

CMS admin 경로 차단

admin 차단 프리셋은 Disallow: /admin/ 와 Disallow: /wp-admin/ 를 쓰고 나머지 사이트는 크롤 가능하게 둡니다.

지정 크롤러와 사용자 경로

User-agent를 Googlebot, Disallow /tmp, Allow /public/, sitemap URL로 설정하면 혼합 그룹과 Sitemap: 줄이 생성됩니다.

SEO를 위한 Robots.txt 모범 사례

전체 가이드 읽기

Robots.txt 생성기 사용 방법: 완벽 가이드 (2026) - 5 분 읽기

Robots.txt 생성기에 대한 자주 묻는 질문

robots.txt는 어디에 두나요?: 사이트 루트에 저장: https://www.example.com/robots.txt. 크롤러는 그 경로만 가져옵니다. 하위 디렉터리 파일은 무시됩니다.
Allow와 Disallow의 차이는?: Disallow는 건너뛸 경로 접두사, Allow는 가져올 수 있는 접두사입니다. 상위 경로가 disallow일 때 유용합니다. 이 생성기에서 경로 목록이 비어 있으면 기본은 Allow: / (전체 사이트)입니다.
robots.txt로 Google에서 페이지를 숨기나요?: 아니요. 크롤러에게 해당 URL 가져오기를 요청하지 말라고 할 뿐입니다. 다른 곳에서 링크되면 검색에 나올 수 있습니다. 결과에서 제외하려면 페이지에 noindex를 사용하세요.
Sitemap 줄을 추가해야 하나요?: XML sitemap이 있으면 예. Sitemap: 지시는 User-agent 그룹과 별개이며 Google, Bing 등이 URL을 찾는 데 도움이 됩니다. 절대 https URL을 사용하세요.
Crawl-delay가 포함되나요?: 아니요. Google은 Crawl-delay를 무시합니다. Googlebot 속도 조절은 Search Console 크롤 설정을 사용하세요. 이 생성기는 User-agent, Allow, Disallow, Sitemap만 다룹니다.
파일이 기기 밖으로 나가나요?: 아니요. Robots.txt 생성기는 브라우저에서만 동작하며, 경로와 sitemap URL은 업로드되거나 저장되지 않습니다.

Open Graph 태그 생성기

제목, 설명, URL, 이미지로 Open Graph 및 Twitter Card 메타 태그를 생성. 실시간 HTML과 소셜 미리보기가 있는 무료 OG 태그 생성기.

Meta Description Checker & SERP Preview

무료 SERP 길이 checker와 meta description preview. 실시간 문자 수와 Google snippet preview - 또는 초안 생성. 150-160자 한도에 맞춤.

Slug Generator

제목·구절을 깨끗한 SEO-friendly URL slug로 변환. 소문자, 악센트 제거, hyphen 또는 underscore 구분 - 무료, 즉시, 비공개.