Claude-User
Robot opéré par Anthropic. Ce robot va chercher une page précise parce qu’un utilisateur vient de la demander. Le trafic est faible et intentionnel ; le bloquer revient à refuser de répondre à quelqu’un qui vous cherche.
- Opérateur
- Anthropic
- Finalité
- Requête d’un utilisateur
- Applique robots.txt
- oui
- Chaîne d’agent utilisateur
- Non publiée par l’opérateur.
L’autoriser
À placer dans le robots.txt servi à la racine de votre domaine. Les groupes de robots.txt ne se cumulent pas : un robot n’applique que le groupe le plus spécifique qui le nomme, donc une règle générale plus permissive ne s’ajoutera pas à celle-ci.
L’autoriser coûte quelques requêtes par jour, toutes déclenchées par une personne qui vous cherchait. C’est le trafic le plus intentionnel qu’un robot puisse produire.
User-agent: Claude-User Allow: /
Le refuser
Le refus est immédiat pour les robots qui appliquent robots.txt, et sans effet rétroactif : ce qui a déjà été collecté l’est.
Le refuser fait répondre à cette personne que la page est inaccessible. Elle ne saura pas que c’est une décision de votre part.
User-agent: Claude-User Disallow: /
Comment vérifier son passage chez vous
L’opérateur ne publie aucune chaîne d’agent utilisateur officielle pour ce robot : son passage ne peut pas être identifié de façon fiable dans vos journaux. Une chaîne observée circule parfois, mais la vérifier reviendrait à filtrer sur une valeur que rien ne garantit.
Les autres robots de Anthropic
-
ClaudeBot
Collecte pour l’entraînement des modèles.
-
Claude-SearchBot
Alimente les réponses citées.
Les autres robots de même finalité
Une décision prise ici se prend rarement seule : ces robots relèvent du même arbitrage.