L’application 🤖 robots.txt permet d'ajouter ou modifier des règles dans votre fichier robots.txt. Vous serez autonomes pour déployer vos modifications en quelques clics. Welcome les optimisations pour le budget crawl 😉
Pour utiliser le robots.txt, c’est simple 😉
À ce jour, nous ne validons pas le code que vous renseignez dans votre fichier robots.txt.
Nous vous conseillons d’utiliser un validateur spécialisé.
Lorsque vous coupez les optimisations EdgeSEO, nous continuons d’afficher le robots.txt. Si vous souhaitez le désactiver, il faudra repasser le toogle « Remplacer le robots.txt » sur off.