a11y.skipToMainContent
1

Robots.txt Générateur

Construisez un robot.txt — Autoriser / interdire les règles par utilisateur-agent, option de rampement-delay, et sitemap URL.

Add directives below, then Generate.

Rules (one per line: allow:/path, disallow:/path, or useragent:Name)

More options
Was this tool helpful?
Send output to:
Advertisement

How to use Robots.txt Generator

  1. Règles de type — une par ligne: utilisateur:*, interdiction:/admin/, permis:/admin/public/, etc.
  2. Ajoute en option l'URL du sitemap et le calque.
  3. Cliquez sur Générer et enregistrer comme robots.txt à votre racine de site.

Quel est {nom} ?

robots.txt indique aux moteurs de recherche quelles parties de votre site indexer et lesquelles sauter. Ce générateur prend des règles simples dans le format useragent:Name, disallow:/path et allow:/path et affiche un fichier correctement formaté prêt à être téléchargé sur votre racine du site.

Advertisement

FAQ

Où va robot.txt ?
Toujours à la racine de votre domaine: https://votresite.com/robots.txt — pas dans les sous-répertoires.
Robots.txt est-il exécutoire ?
Non, c'est une suggestion que les gens bien élevés respectent. Pour un véritable contrôle d'accès, utilisez des blocs d'authentification ou côté serveur.

Related tools

Author

1S
1Stop Tools"The Toolsmith"

Editorial Team at 1Stop Tools

The 1Stop Tools editorial team tests, reviews, and curates every utility on this platform. We believe tools should be free, fast, and private, with no accounts, no uploads, and no tracking. Every tool on this site runs entirely in the browser, and we test on multiple devices and browsers to ensure reliability for everyone, everywhere, on any connection.

📖 Robots.txt Generator on Wikipedia·Generators on Wikipedia·Robots.txt Generator on Britannica

People also use

← Back to Generators · All tags
Advertisement