Outils
Accès des crawlersAnalyse SEO IA complèteUn seul rapport sur la préparation de votre site à ChatGPT, Gemini et AI Overviews : 40 vérifications, un score et les corrections qui comptent.Vérificateur de visibilité IAChatGPT, Claude, Perplexity, Gemini et Copilot peuvent-ils voir votre page ? Une seula vérification pour tous les moteurs.Audit de site pour l’IAExplorez tout votre site et trouvez chaque page que les crawlers IA ne peuvent pas atteindre, lire ou citer.Analytics des crawlers IA CloudflareConnectez Cloudflare avec un token en lecture seule et voyez le trafic réel de GPTBot, ClaudeBot et PerplexityBot.Vérificateur de sitemapValidez votre sitemap XML et trouvez les URL cassées, redirigées, en noindex ou bloquées pour les bots IA.Vérificateur de crawlers IAVoyez lesquels des 21 bots IA votre robots.txt autorise ou bloque, avec la règle exacte qui décide.Générateur de robots.txt pour l’IAAutorisez la recherche IA, bloquez l’entraînement. Créez un robots.txt pour 21 bots IA en quelques clics.Analyseur de logs des bots IADéposez vos logs serveur et voyez quels bots IA vous explorent, ce qu’ils lisent et lesquels sont des faux.Vérificateur d’IP des bots IAEst-ce vraiment GPTBot ? Vérifiez n’importe quelle adresse IP avec les listes d’IP officielles des crawlers IA et le DNS inverse.
Contenu pour l’IAVérificateur de crawlabilité IAVoyez votre page comme les crawlers IA : HTML brut, sans JavaScript, converti en Markdown.Vérificateur de citabilité IAChatGPT citera-t-il votre page ? Mesurez la facilité avec laquelle l’IA peut reprendre chaque passage.Générateur de query fan-outAIDécouvrez les sous-requêtes cachées que lancent AI Mode et ChatGPT pour une recherche, et celles que votre page couvre.Vérificateur de balisage SchemaAudit complet des données structurées : ce qui est présent, ce qui manque pour ce type de page, ce qui est cassé, et un JSON-LD prêt à coller.Compteur de tokens LLMComptez les tokens GPT de n’importe quel texte ou page web et voyez dans quelles fenêtres de contexte ils tiennent.Générateur de llms.txtGénérez en quelques secondes un llms.txt conforme à la spécification à partir de votre sitemap, puis modifiez-le visuellement.Validateur de llms.txtVérifiez qu’un llms.txt respecte la spécification : structure, liens, doublons et erreurs courantes.
Agents et confianceScanner de prompt injectionTrouvez les instructions cachées pour l’IA sur n’importe quelle page web : texte invisible, commentaires, astuces Unicode, contenu réservé aux bots.Test de compatibilité agents IALes agents IA peuvent-ils trouver, comprendre et utiliser votre site ? Vérifie MCP, A2A, OpenAPI, llms.txt et l’utilisabilité de la page.Vérificateur d’entité de marque IAL’IA connaît-elle votre marque ? Vérifiez la cohérence entre Wikidata, Wikipédia et votre balisage Organization.Suivi du trafic IA dans GA4Suivez les visites venant de ChatGPT, Perplexity, Gemini et Claude dans GA4 avec une regex et une configuration de canal prêtes à l’emploi.
GuidesBlogTracker IATarifs
FR
EnglishENУкраїнськаUADeutschDEFrançaisFR
Crawlers IAL’équipe BotReady

Les trois crawlers d’Anthropic expliqués

Bloquer ClaudeBot ne vous empêche plus d’apparaître dans les réponses de recherche de Claude, contrairement à Claude-SearchBot. Voici comment fonctionnent les bots d’Anthropic.

La documentation d’Anthropic sur ses crawlers répertorie trois bots distincts, chacun avec son propre user-agent que vous pouvez autoriser ou bloquer dans le robots.txt. Selon plusieurs sources, cette mise à jour de la documentation date de fin février 2026. La version précédente ne décrivait que ClaudeBot.

Ce qui s’est passé

  • ClaudeBot collecte du contenu web public pour entraîner les modèles d’Anthropic.
  • Claude-SearchBot explore le web pour indexer le contenu en vue de la recherche, afin que Claude puisse trouver et citer des pages dans ses réponses. Anthropic avertit que bloquer ce bot peut réduire votre visibilité et la précision des résultats de recherche de Claude.
  • Claude-User récupère une page lorsqu’un utilisateur interroge Claude à ce sujet.

Les anciens user-agents, Claude-Web et anthropic-ai, sont obsolètes. Anthropic publie les plages d’adresses IP utilisées par ses bots, ce qui vous permet de vérifier qu’une requête prétendant provenir de Claude provient bien d’Anthropic.

Ce que cela signifie pour vous

  • Bloquez l’entraînement, conservez la recherche : interdisez ClaudeBot et autorisez Claude-SearchBot et Claude-User.
  • Vérifiez les anciennes règles. Un robots.txt qui bloque uniquement anthropic-ai est aujourd’hui inopérant.
  • Vérifiez avant de faire confiance. Les scrapers se font souvent passer pour ClaudeBot. Comparez les adresses IP des requêtes avec les plages publiées par Anthropic.

Le Vérificateur d’IP des bots IA vous indique si une adresse IP appartient réellement au bot qu’elle prétend être.

Sources

  1. Search Engine Journal
  2. Momentic, AI crawler list (October 2026)

Vérifiez votre site

Vérificateur de crawlers IAVoyez lesquels des 21 bots IA votre robots.txt autorise ou bloque, avec la règle exacte qui décide.Générateur de robots.txt pour l’IAAutorisez la recherche IA, bloquez l’entraînement. Créez un robots.txt pour 21 bots IA en quelques clics.Vérificateur d’IP des bots IAEst-ce vraiment GPTBot ? Vérifiez n’importe quelle adresse IP avec les listes d’IP officielles des crawlers IA et le DNS inverse.