Menu

Challenge : Reprenez le contrôle sur votre fichier robots.txt

Vous allez apprendre à modifier le fichier robots.txt de votre site sans dépendre de votre CMS. C’est rapide, simple, et directement actionnable depuis l’application Robots.txt.

Le challenge en vidéo

Let’s go ! On vous guide étape par étape

  1. Connectez-vous à la console EdgeSEO
  2. Cliquez sur l’application Robots.txt
  3. Activez le bouton « Remplacer le robots.txt »
  4. Dans le champ qui apparaît, saisissez les règles que vous souhaitez appliquer
  5. Vous pouvez aussi ajouter une touche perso en ASCII - ex : # miaou =^.^= 🐱
  6. Cliquez sur « Sauvegarder »
  7. Vérifiez que le fichier est bien accessible à l’URL suivante : https://www.url-de-mon-site.fr/robots.txt

Ressource utile

Vous êtes désormais autonome pour gérer votre fichier robots.txt. Vous allez pouvoir optimiser votre budget crawl sans attendre.