생성기

robots.txt 생성기

검색엔진 크롤러 규칙(User-agent·Allow·Disallow·Sitemap)을 골라 robots.txt를 만듭니다.

규칙 프리셋

User-agent

Crawl-delay (초, 선택)

Sitemap URL (선택)

robots.txt

User-agent: *
Disallow:

Sitemap: https://example.com/sitemap.xml

✦

생성기 다른 툴