Tableau de bord · Module 4 · Leçon 1/5
Leçon 1 sur 5Le zoo des robots IA : qui vient vraiment vous lire
- Les robots IA se rangent en 3 familles : ceux qui entraînent les modèles, ceux qui cherchent en direct, et les nouveaux agents.
- Les bots de recherche (OAI-SearchBot, PerplexityBot, ClaudeBot, Bingbot) sont ceux qui vous font citer. Ne les bloquez jamais.
- Bloquer le mauvais robot, c'est disparaître de ChatGPT ou Perplexity sans le savoir.
Beaucoup de robots passent sur votre site, avec des noms différents. Avant de décider qui a le droit d'entrer (leçon suivante), il faut savoir qui fait quoi. Sinon, vous risquez de bloquer celui qui vous rend visible.
Les 3 familles de robots
1. Les bots d'entraînement. Ils collectent du contenu pour entraîner les futures versions des modèles. Votre page devient une brique de la connaissance générale de l'IA, sans être citée directement. Les bloquer est un choix philosophique, pas stratégique.
2. Les bots de recherche. C'est la famille critique. Ils explorent votre site en direct quand un utilisateur pose une question, pour construire la réponse. C'est grâce à eux que vous êtes cité. Les bloquer, c'est vous rendre invisible.
3. Les agents (émergents). Des robots qui agissent pour un utilisateur (réserver, comparer). On en est aux débuts. Ne bloquez rien par défaut, gardez l'œil ouvert.
Le tableau par IA
| Robot | Famille | Rôle |
|---|---|---|
| GPTBot | Entraînement | Entraîne les modèles d'OpenAI |
| OAI-SearchBot / ChatGPT-User | Recherche | Alimentent les réponses de ChatGPT |
| PerplexityBot | Recherche | Le crawler de Perplexity, très actif |
| ClaudeBot | Recherche | Le robot d'Anthropic (Claude) |
| Bingbot | Recherche | Index Bing, donc porte d'entrée de Copilot |
| Googlebot | Recherche | Alimente Google, Gemini et les AI Overviews |
| Google-Extended | Entraînement | Entraîne Gemini (le bloquer n'empêche pas d'être cité) |
Subtilité utile : bloquer GPTBot (entraînement) ne vous rend PAS invisible dans ChatGPT, car ce sont OAI-SearchBot et ChatGPT-User (recherche) qui alimentent les réponses. Ce sont eux qu'il faut laisser passer.
67 % des PME françaises sont absentes de toute réponse IA (AI Labs Audit, 2026). Parfois, c'est simplement un robot de recherche bloqué par erreur.
Notez cette règle avant la prochaine leçon : les bots de recherche (OAI-SearchBot, ChatGPT-User, PerplexityBot, ClaudeBot, Bingbot, Googlebot) doivent toujours pouvoir entrer sur {{site}}.