Générateur de Robots.txt

Générateur de Robots.txt

Créez un robots.txt correct pour contrôler les robots d'exploration.

Leave blank if you don't have.

Google
Google Image
Google Mobile
MSN Search
Yahoo
Yahoo MM
Yahoo Blogs
Ask/Teoma
GigaBlast
DMOZ Checker
Nutch
Alexa/Wayback
Baidu
Naver
MSN PicSearch

The path is relative to the root and must contain a trailing slash "/".

Le Générateur de Robots.txt construit gratuitement un fichier robots.txt correct, vous permettant de contrôler quels robots peuvent accéder à quelles parties de votre site et où se trouve votre sitemap.

Pourquoi le robots.txt compte

Le robots.txt indique aux robots d'exploration ce qu'ils peuvent et ne peuvent pas récupérer. Un fichier correct maintient les zones privées ou dupliquées hors de l'exploration et oriente les robots vers votre sitemap ; un fichier erroné peut accidentellement bloquer tout votre site.

Comment utiliser le Générateur de Robots.txt

  1. Choisissez les chemins à autoriser ou interdire.
  2. Ajoutez l'URL de votre sitemap.
  3. Copiez le fichier à la racine de votre site sous le nom robots.txt.

Fonctionnalités clés

  • Robots.txt gratuit et correct
  • Règles d'autorisation/interdiction par robot
  • Inclut la directive sitemap
  • Sans inscription

Outils associés

Générateur de redirection Htaccess · Générateur de balises meta · Vérificateur d'indexation Google

Questions fréquentes

Le Générateur de Robots.txt est-il gratuit ?

Oui, il est entièrement gratuit.

Où placer le robots.txt ?

À la racine de votre domaine, à /robots.txt.

Peut-il bloquer tout mon site ?

Un Disallow erroné le peut — vérifiez toujours avant de publier.

Dois-je indiquer mon sitemap ?

Oui, ajouter l'URL du sitemap aide les robots à trouver vos pages.