Nous distinguons trois grandes catégories de bots IA afin d’adapter nos règles de traitement :
ai-assistant
Les assistants conversationnels qui interagissent directement avec les utilisateurs.
`perplexity`, `duckassistbot`, `claude-web`, `anthropic`, `assistant`
ai-crawler
Les crawlers utilisés pour collecter du contenu à grande échelle.
`gptbot`, `chatgpt`, `openai`, `bard`, `google-extended`, `anthropic-ai`, `claude-bot`, `meta-externalagent`, `facebookbot`, `ccbot`, `common crawl`, `ai2bot`, `diffbot`, `omgili`, `omgilibot`, `bytespider`, `bytedance`.
ai-search
Les moteurs de recherche IA qui mixent crawl et génération de réponses.
`oai-searchbot`, `searchgpt`, `bing.*gpt`, `you-bot`, `youbot`.
Lorsque vous activez la recette SEO html to markdown depuis l'application Recommandation SEO, nous livrons automatiquement la version Markdown de vos pages aux bots listés ci-dessus.
Cela garantit que les assistants, crawlers et moteurs IA accèdent à un contenu allégé et optimisé.
Vous gardez le contrôle : vos utilisateurs humains continuent de voir la version HTML complète, tandis que les bots IA reçoivent un format pensé pour leur usage.