Geometrick
Retour
PLAYBOOKAI Crawlability

Revoir les règles bots IA dans robots.txt

Configuration à affiner pour un contrôle fin de l'accès des IA.

Facile
20 min
Pourquoi c'est important
  • Un robots.txt bien configuré permet d'autoriser sélectivement les bots IA légitimes tout en bloquant les scrapers indésirables.
Étapes à suivre
  1. 1

    Listez les bots IA que vous voulez autoriser vs bloquer.

  2. 2

    Configurez chaque `User-agent:` explicitement.

Prêt à appliquer ?

Lancez un audit complet · GeoMetrick suit les gains après chaque optimisation et vous propose la prochaine action prioritaire.