GÉNÉRATEUR DE ROBOTS.TXT GRATUIT

Générateur de robots.txt gratuit

Créez dans le navigateur le fichier standard qui guide les robots de recherche.

Vos règles et URL ne sont ni envoyées ni stockées.

  1. 1Saisir les règles
  2. 2Vérifier le fichier
  3. 3Publier le fichier

1 · Saisir les règles

Créer les règles de crawl

Définissez les chemins autorisés et bloqués par groupe.

Créé sur votre appareil
Groupe 1
Règles de chemin
URL de sitemap

Ajoutez des URL complètes pour faciliter leur découverte.

2 · Vérifier le fichier

Aperçu de robots.txt

Saisissez des règles pour afficher le fichier.

Publiez le fichier texte UTF-8 à la racine /robots.txt.

GUIDE ROBOTS.TXT GRATUIT

Préparez les règles en trois étapes

Créez-le gratuitement sans compte ni installation.
1

Choisir les robots

Saisissez * ou des noms comme Googlebot.

2

Définir les chemins

Ajoutez Allow et Disallow puis vérifiez le fichier.

3

Publier à la racine

Placez le fichier à l’adresse /robots.txt du site.

CONTRÔLE DU CRAWL

À savoir avant publication

Crawl, indexation et sécurité ont des rôles différents.

Règles par groupe

Placez chaque règle sous le bon User-agent.

Chemin précis

La correspondance de chemin la plus précise est généralement appliquée.

Ne cachez pas de secrets

robots.txt est public et ne protège pas les données privées.

GÉNÉRATEUR DE ROBOTS.TXT GRATUIT FAQ

Questions sur le générateur de robots.txt

Utilisation gratuite, emplacement et rôle.
1Le générateur est-il gratuit ?

Oui. Il est gratuit, sans compte ni limite, et tout reste dans le navigateur.

2Où publier robots.txt ?

À la racine de l’hôte, par exemple https://example.com/robots.txt.

3Disallow retire-t-il une page de la recherche ?

Non. Il limite le crawl sans garantir la désindexation ni la confidentialité.

4Puis-je ajouter des sitemaps ?

Oui. Plusieurs URL http ou https complètes sont acceptées.