Robôs da web · Treino de modelo
O que é o ClaudeBot e como bloquear
Por Redação Citado pela IA · Conferido na doc oficial em 10/08/2026
- Dono
- Anthropic
- Token de user-agent
- ClaudeBot
- Como aparece no log
- Não aparece: existe só como token de robots.txt
- Para que serve
- Treino de modelo
- Respeita robots.txt
- Sim, pela doc do dono
O que o ClaudeBot faz
Percorre páginas públicas e recolhe conteúdo para o treino dos modelos Claude. A Anthropic descreve o trabalho dele como reunir material da web para melhorar a utilidade e a segurança dos modelos, e publica a lista de endereços de onde os próprios robôs saem, o que permite conferir se a visita veio mesmo da empresa antes de reagir a picos de acesso no servidor.
Como bloquear o ClaudeBot
Duas linhas no robots.txt da raiz do domínio, em bloco próprio. O token vale por robô, então nomear um não afeta os outros:
User-agent: ClaudeBot
Disallow: /A Anthropic declara na documentação que o robô honra as diretivas do robots.txt. Regra nova só passa a valer na próxima visita, e o arquivo precisa responder em /robots.txt.
O que se perde ao bloquear
Fechar a porta para o ClaudeBot tira o site do material de treino e não altera nada na Busca do Google, que usa outro robô. O detalhe que quase todo tutorial esquece: a Anthropic mantém mais dois agentes, o Claude-User, que abre a página quando alguém pergunta algo ao Claude, e o Claude-SearchBot, que alimenta a busca do produto. Bloquear os três de uma vez fecha também a chance de ser citado com link.
Citado pela IA está chegando
Deixe seu email e receba o aviso quando o primeiro envio sair.
Entre antes do primeiro envio.
Você só recebe o aviso de lançamento. Cancele quando quiser.