Claude-SearchBot

Agent d'Anthropic qui indexe des pages pour la recherche et les citations de Claude.

Claude-SearchBot est l'agent d'Anthropic qui explore et indexe des contenus afin de les mobiliser, avec sources, dans les réponses de recherche de Claude. C'est le robot dédié à la visibilité et à la citation, distinct des autres agents de la maison.

Sa séparation d'avec ClaudeBot, voué à la collecte d'entraînement, et de Claude-User, chargé de la récupération déclenchée par l'utilisateur, ouvre une marge de manœuvre précieuse. Le distinguer permet d'autoriser l'indexation et la citation sans nécessairement consentir à ce que les contenus servent à entraîner les modèles.

On retrouve ici le schéma désormais standard chez les grands fournisseurs, identique à celui d'OAI-SearchBot côté OpenAI : un agent pour être vu, un autre pour l'entraînement, réglables indépendamment. La bonne pratique consiste à traiter chaque robot par son user-agent exact dans le robots.txt et à réviser la liste régulièrement, ces cartographies évoluant plus vite que les configurations figées.