Anthropic · Suchindizes

Claude-SearchBot

Crawlt das Web, um Relevanz und Genauigkeit der Suchergebnisse von Claude zu verbessern. Wer ihn blockiert, bleibt aus diesem Index heraus, was die Sichtbarkeit in Suchantworten verringern kann.

robots.txt-Name

Claude-SearchBot

User-Agent

Claude-SearchBot

Kategorie

Suchindizes: Durchsucht das Web, um den Index einer Suchmaschine oder KI-Suche aufzubauen.

Befolgt robots.txt

Ja

Offizielle Dokumentation

https://support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-can-site-owners-block-the-crawler

Veröffentlichte IP-Bereiche

https://claude.com/crawling/bots.json

Geprüft anhand der offiziellen Dokumentation am 17. Oktober 2026.

In robots.txt blockieren oder zulassen

Fügen Sie diese Zeilen in die Datei robots.txt im Stammverzeichnis Ihrer Domain ein. Um ihn überall zu blockieren:

User-agent: Claude-SearchBot
Disallow: /

Um ihn überall außer in einem Ordner zuzulassen:

User-agent: Claude-SearchBot
Disallow: /private/

Handelt es sich wirklich um diesen Bot?

Jeder kann einen User-Agent kopieren. Um sicherzustellen, dass eine Anfrage von Anthropic stammt, vergleichen Sie deren IP-Adresse mit den von dem Unternehmen veröffentlichten Bereichen.

Andere Bots von Anthropic

• Claude-User · KI-Antworten
• ClaudeBot · Trainings-Crawler