Anthropic · Índices de pesquisa
Claude-SearchBot
Rastreia a web para melhorar a relevância e a precisão dos resultados de pesquisa do Claude. Bloqueá-lo deixa o seu conteúdo fora desse índice, o que pode reduzir a sua visibilidade nas respostas.
- Nome no robots.txt
Claude-SearchBot- User agent
Claude-SearchBot- Categoria
- Índices de pesquisa: Percorrer a web para criar o índice de um motor de pesquisa ou pesquisa de IA.
- Respeita o robots.txt
- Sim
- Documentação oficial
- https://support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-can-site-owners-block-the-crawler
- Intervalos de IP publicados
- https://claude.com/crawling/bots.json
Verificado com a documentação oficial em 17 de outubro de 2026.
Bloqueie ou permita no robots.txt
Adicione estas linhas ao ficheiro robots.txt na raiz do seu domínio. Para bloquear em todo o lado:
User-agent: Claude-SearchBot
Disallow: /
Para o permitir em todo o lado exceto numa pasta:
User-agent: Claude-SearchBot
Disallow: /private/
É realmente este bot?
Qualquer pessoa pode copiar um user agent. Para ter a certeza de que um pedido provém da Anthropic, compare o seu endereço IP com os intervalos publicados pela empresa.
Outros bots da Anthropic
- Claude-User · Respostas de IA
- ClaudeBot · Crawlers de treino
Veja que crawlers de IA leram o seu site
O Statsdot mantém os bots fora dos seus visitantes e, com a monitorização de crawlers de IA, mostra que crawlers leram as suas páginas e que páginas solicitaram. Sem cookies, sem dados pessoais.