GEO technique : rendre votre site accessible et lisible par les robots IA
Réponse courte : le GEO technique garantit que les robots des moteurs de réponse IA peuvent accéder à vos contenus et les lire. En pratique : distinguer les robots de recherche (OAI-SearchBot, Claude-SearchBot, PerplexityBot), qui conditionnent votre présence dans les réponses, des robots d’entraînement (GPTBot, ClaudeBot) et des robots d’action utilisateur (ChatGPT-User, Claude-User), puis régler le robots.txt, le pare-feu et le rendu en conséquence. Un consultant SEO en fait une politique d’accès écrite, vérifiée dans les logs.
Quels robots d’IA visitent votre site, et pour quoi faire ?
| Éditeur | Robot | Rôle | Conséquence d’un blocage |
|---|---|---|---|
| OpenAI | OAI-SearchBot | Recherche : alimente les réponses de ChatGPT Search | Moins de chances d’être cité dans ChatGPT Search |
| OpenAI | GPTBot | Collecte pour l’entraînement des modèles | Contenu non utilisé pour l’entraînement |
| OpenAI | ChatGPT-User | Visite déclenchée par un utilisateur | Pages non lisibles à la demande d’un utilisateur |
| Anthropic | Claude-SearchBot, ClaudeBot, Claude-User | Recherche, entraînement, action utilisateur | Même logique d’arbitrage par usage |
| Perplexity | PerplexityBot, Perplexity-User | Indexation pour la recherche, action utilisateur | Moins de citations dans Perplexity |
| Googlebot ; jeton Google-Extended | Recherche ; contrôle de l’usage pour certains produits IA | Googlebot reste nécessaire pour la Recherche |
Sources : documentations officielles OpenAI, Anthropic, Perplexity et Google (voir sources ci-dessus).
La distinction entre robots de recherche et d’entraînement est le cœur du sujet : le glossaire détaille le rôle du robot GPTBot et ses différences avec les robots de recherche.
Une politique d’accès en trois décisions
| Décision | Option par défaut conseillée | Quand en changer |
|---|---|---|
| Robots de recherche IA | Autoriser | Contenu payant ou contractuellement protégé |
| Robots d’entraînement | Décider selon votre modèle économique (éditeur, e-commerce, services) | Droits d’auteur, accords de licence, stratégie de marque |
| Robots d’action utilisateur | Autoriser en général, surveiller les volumes | Charge serveur anormale ou usage abusif |
Le fichier robots.txt suit le protocole normalisé dans la RFC 9309 ; il exprime des préférences que les robots respectueux suivent, et ne remplace pas un contrôle par pare-feu pour les robots qui l’ignorent.
Les contrôles que je réalise
- Lecture du robots.txt : règles génériques qui bloquent sans le vouloir les robots d’IA, ou règles obsolètes.
- Vérification dans les logs : quels robots passent, avec quelles IP, et si leur identité est authentique (analyse de logs).
- Pare-feu et CDN : règles de protection anti-robots qui bloquent des robots de recherche légitimes.
- Rendu : contenu absent du HTML initial, que les robots ne verront pas s’ils n’exécutent pas le JavaScript.
- Délais : OpenAI indique qu’un changement de robots.txt peut demander un certain délai avant d’être pris en compte.
Vos contenus sont-ils lisibles par les IA ?
Je vérifie votre robots.txt, vos logs et vos règles de pare-feu, puis vous remets une politique d’accès écrite.
Demander un contrôle GEO techniqueQuel budget prévoir ?
Le contrôle d’un robots.txt est rapide ; le travail porte surtout sur la vérification dans les logs et sur la décision d’arbitrage. Des outils d’analyse de logs existent à prix public (Log File Analyser de Screaming Frog : 99 £ par licence et par an).
| Périmètre | Durée | Budget indicatif HT | Nature |
|---|---|---|---|
| Revue du robots.txt et du pare-feu, recommandations | 1 à 2 jours | 500 à 1 800 € | Estimation |
| Politique d’accès complète avec analyse des logs | 1 à 2 semaines | 2 500 à 6 000 € | Estimation |
| Contrôle trimestriel | 0,5 à 1 jour | 300 à 900 € | Estimation |
Estimations sans valeur de devis ; elles supposent un accès aux logs et au robots.txt.
Quant aux fichiers pour agents IA comme llms.txt, leur utilité se vérifie dans les logs.
Pourquoi me confier votre GEO technique ?
Un mauvais réglage peut vous rendre invisible dans les réponses des IA sans que personne ne s’en aperçoive. Ce que j’apporte :
| Ce que vous obtenez | Concrètement |
|---|---|
| Une politique écrite | Une décision claire par usage (recherche, entraînement, action utilisateur) |
| Des vérifications dans les logs | Je constate ce que font les robots, je ne me contente pas de la documentation |
| Une veille | Les robots et leurs règles évoluent : revue trimestrielle incluse |
| Une vision globale | Le GEO technique s’articule avec l’audit de visibilité IA et le contenu |
- Un échange de 30 minutes, gratuit et sans engagement, pour cadrer votre contexte et vos objectifs.
- Un expert senior qui reste sur le dossier : vingt ans de SEO depuis 2005, côté agence comme côté annonceur, dont +50 M€ de chiffre d’affaires SEO généré chez LDLC.
- Une réponse écrite et chiffrée : priorités classées par impact sur votre chiffre d’affaires, pas une checklist générique.
- Une confidentialité totale : je peux intervenir en complément de votre agence ou de votre équipe, sans que vous ayez à résilier quoi que ce soit.
Parlons de votre projet
Décrivez-moi votre site et votre objectif : je reviens vers vous avec une première analyse et la façon la plus simple de travailler ensemble, en tant que consultant SEO indépendant.
Contacter Laurent BousquetQuestions complémentaires
Faut-il bloquer GPTBot ?
C’est un arbitrage, pas une obligation : GPTBot sert à l’entraînement, pas à la recherche. Bloquer GPTBot n’empêche pas OAI-SearchBot de citer vos pages dans ChatGPT Search si vous l’autorisez.
Le robots.txt suffit-il à empêcher l’accès à mes contenus ?
Non : il exprime des préférences respectées par les robots conformes. Pour les robots qui l’ignorent, il faut un contrôle par pare-feu ou CDN.
Comment savoir si un robot d’IA m’a visité ?
En analysant les logs serveur : chaque robot s’identifie par son user-agent, à vérifier avec les plages d’adresses IP publiées par l’éditeur quand elles existent.
À retenir
- Distinguer robots de recherche, d’entraînement et d’action utilisateur.
- Autoriser la recherche IA, arbitrer l’entraînement selon votre modèle économique.
- Vérifier dans les logs et revoir la politique chaque trimestre.
Laurent Bousquet, consultant SEO et GEO freelance. Parlons de votre projet ›