Was ist Claude-SearchBot?

Claude-SearchBot ist der Crawler von Anthropic, der das Web liest, um Qualität und Relevanz der Suchergebnisse von Claude zu verbessern. Claude-SearchBot ist der Crawler hinter der Suche von Claude: Er liest das Web vorab, damit Claude gute Ergebnisse hat, auf die es zurückgreifen kann. Wer ihn sperrt, trifft eine Entscheidung über die Suche, nicht über das Training.

Kostenlos testen Demo anfragen

200 Antworten. 25 Prompts/Frage. Top-KI-Engines. 2 Tage. Kostenlos. Keine Kreditkarte.

Was macht Claude-SearchBot?

Anthropic sagt, dass Claude-SearchBot das Web durchsucht, um die Qualität der Suchergebnisse für Nutzer zu verbessern, und Online-Inhalte analysiert, um Relevanz und Genauigkeit der Suchantworten zu erhöhen. Wer ihn deaktiviert, hindert das System von Anthropic daran, Ihre Inhalte für die Suchoptimierung zu indexieren, was laut Anthropic die Sichtbarkeit und Genauigkeit Ihrer Website in den Suchergebnissen der Nutzer verringern kann (Anthropic, 7. April 2026).

Wie verhält sich Claude-SearchBot?

Anthropic dokumentiert für alle drei Bots dieselben Regeln:

Sie beachten robots.txt-Anweisungen.
Sie versuchen nicht, CAPTCHAs oder andere Schutzmaßnahmen zu umgehen.
Sie unterstützen die nicht standardisierte Regel Crawl-delay, um einen Bot zu bremsen, ohne ihn zu sperren.
Eine Regel gilt pro Host, jede Subdomain braucht also ihre eigene.
Eine Sperre per IP-Adresse funktioniert womöglich nicht zuverlässig, weil sie die Bots daran hindern kann, die robots.txt zu lesen.

Wie erlauben Sie Claude-SearchBot und sperren das Training?

Geben Sie jedem Bot eine eigene Gruppe. Das ist die übliche Wahl für Marken, die von Claude zitiert werden wollen, ohne zu Trainingsdaten beizutragen. Prüfen Sie die Live-Datei mit dem kostenlosen KI-Crawler-Checker.

# In der Suche von Claude auffindbar bleiben
User-agent: Claude-SearchBot
Allow: /

User-agent: Claude-User
Allow: /

# Inhalte aus dem Training von Anthropic heraushalten
User-agent: ClaudeBot
Disallow: /

Was steht auf dem Spiel, in einem echten Beispiel?

Im öffentlichen Tesla-Beispiel (4. Okt. 2026) zitierte Claude über 25 Käuferfragen 351 Seiten, mehr als ChatGPT und Google AI Overviews zusammen, und nannte Tesla in 11 Antworten.

Eine lange Quellenliste ist ein großer Pool von Zitierungsplätzen, und Claude-SearchBot entscheidet, ob Ihre Seiten dafür indexiert sind. tesla.com bekam einen dieser 351; die meisten gingen an Nachschlage- und Drittseiten.

Wie sehen Sie Claude-SearchBot auf Ihrer Website?

Proofsource zählt täglich die Anfragen von KI-Crawlern aus Ihrer Cloudflare-Zone oder Ihren Zugriffslogs, verifiziert gegen die veröffentlichte IP-Liste von Anthropic, und zeigt, welche gecrawlten Seiten in den Antworten von Claude zitiert werden. Siehe AI Traffic und Crawler-Zugriff.

Häufige Fragen: Claude-SearchBot

Wird Claude-SearchBot für das Training genutzt?

Anthropic beschreibt ihn als Indexierung von Inhalten, um Suchergebnisse zu verbessern. Training ist die Aufgabe von ClaudeBot, und jeder Bot hat seine eigene robots.txt-Regel.

Was passiert, wenn ich Claude-SearchBot sperre?

Laut Anthropic werden Ihre Inhalte nicht mehr für die Suchoptimierung indexiert, was Ihre Sichtbarkeit und Genauigkeit in den Suchantworten von Claude verringern kann.

Kann ich Claude-SearchBot bremsen, statt ihn zu sperren?

Ja. Anthropic unterstützt für seine Bots die nicht standardisierte Regel Crawl-delay.

Woran erkenne ich, dass ein Besuch wirklich von Claude-SearchBot stammt?

Prüfen Sie die Quell-IP gegen die Liste, die Anthropic unter claude.com/crawling/bots.json veröffentlicht; laut Anthropic kommt eine IP auf dieser Liste von Anthropic.

Sehen Sie, wo KI Sie auslässt, und was Sie korrigieren sollten.

Sehen Sie, bei welchen Käuferfragen Ihre Marke genannt wird, wer stattdessen genannt wird und was Sie ändern sollten. 200 Antworten. 25 Prompts/Frage. Top-KI-Engines. 2 Tage. Kostenlos. Keine Kreditkarte.

200 Antworten. 25 Prompts/Frage. Top-KI-Engines. 2 Tage. Kostenlos.