a11y.skipToMainContent
1

Robots.txt 발전기

Robots.txt 빌드 - 사용자 시약, 옵션 크롤러 및 사이트 맵 URL 당 규칙 허용 / 허용.

Add directives below, then Generate.

Rules (one per line: allow:/path, disallow:/path, or useragent:Name)

More options
Was this tool helpful?
Send output to:
Advertisement

How to use Robots.txt Generator

  1. 유형 규칙 — 선 당 하나: useragent:*, disallow:/admin/, 허용하십시오:/admin/public/, 등.
  2. 선택적으로 사이트 맵 URL과 크롤 레이를 추가합니다.
  3. 생성을 클릭하고 사이트 루트에서 robots.txt로 저장하십시오.

Robots.txt 생성기은 무엇입니까?

robots.txt는 사이트가 색인과 건너뛰는 검색 엔진 크롤러를 말합니다. 이 발전기는 useragent:Name, disallow:/pathallow:/path 형식으로 간단한 규칙을 취하며 사이트 루트에 업로드할 수 있는 제대로 포맷된 파일을 출력합니다.

Advertisement

FAQ

Robots.txt는 어디에 있습니까?
도메인의 뿌리에서 항상: https://yoursite.com/robots.txt — subdirectories에서.
Robots.txt 실행 가능?
아니 — 그것은 잘 행동 크롤러 존중의 제안이다. 실제 액세스 제어, 사용 인증 또는 서버 측 블록.

Related tools

Author

1S
1Stop Tools"The Toolsmith"

Editorial Team at 1Stop Tools

The 1Stop Tools editorial team tests, reviews, and curates every utility on this platform. We believe tools should be free, fast, and private, with no accounts, no uploads, and no tracking. Every tool on this site runs entirely in the browser, and we test on multiple devices and browsers to ensure reliability for everyone, everywhere, on any connection.

Advertisement