¿Qué es Claude-SearchBot?
Claude-SearchBot es el rastreador de Anthropic que lee la web para mejorar la calidad y la relevancia de los resultados de búsqueda de Claude. Claude-SearchBot es el rastreador detrás de la búsqueda de Claude: lee la web con anticipación para que Claude tenga buenos resultados en los que apoyarse. Bloquearlo es una decisión de búsqueda, no de entrenamiento.
¿Qué hace Claude-SearchBot?
Anthropic dice que Claude-SearchBot recorre la web para mejorar la calidad de los resultados de búsqueda para los usuarios, analizando contenido en línea para mejorar la relevancia y la precisión de las respuestas de búsqueda. Desactivarlo impide que el sistema de Anthropic indexe tu contenido para optimizar la búsqueda, lo que, según Anthropic, puede reducir la visibilidad y la precisión de tu sitio en los resultados de búsqueda de los usuarios (Anthropic, 7 de abril de 2026).
¿Cómo se comporta Claude-SearchBot?
Anthropic documenta las mismas reglas para sus tres bots:
- Respetan las directivas de robots.txt.
- No intentan saltarse los CAPTCHA ni otras medidas contra la evasión.
- Admiten la regla no estándar Crawl-delay, para frenar un bot sin bloquearlo.
- Una regla aplica por host, así que cada subdominio necesita la suya.
- Bloquear por dirección IP puede no funcionar de forma confiable, porque puede impedir que los bots lean robots.txt.
¿Cómo permites Claude-SearchBot y bloqueas el entrenamiento?
Dale a cada bot su propio grupo. Es la elección habitual de las marcas que quieren que Claude las cite sin aportar datos de entrenamiento. Confirma el archivo publicado con el verificador gratuito de rastreadores de IA.
# Sigue apareciendo en la búsqueda de Claude
User-agent: Claude-SearchBot
Allow: /
User-agent: Claude-User
Allow: /
# Deja el contenido fuera del entrenamiento de Anthropic
User-agent: ClaudeBot
Disallow: /¿Qué está en juego, en un ejemplo real?
En el ejemplo público de Tesla (4 de oct. de 2026), Claude citó 351 páginas en 25 preguntas de compra, más que ChatGPT y Google AI Overviews juntos, y mencionó a Tesla en 11 respuestas.
Una lista de fuentes larga es una gran cantidad de lugares para ser citado, y Claude-SearchBot decide si tus páginas están indexadas para ocuparlos. tesla.com se quedó con una de esas 351; la mayoría fue para sitios de referencia y de terceros.
¿Cómo ves Claude-SearchBot en tu sitio?
Proofsource cuenta todos los días las solicitudes de rastreadores de IA desde tu zona de Cloudflare o tus logs de acceso, verificadas con la lista de IP que publica Anthropic, y muestra qué páginas rastreadas terminan citadas en las respuestas de Claude. Consulta Tráfico de IA y Acceso de rastreadores.
Preguntas frecuentes sobre Claude-SearchBot
¿Claude-SearchBot se usa para entrenamiento?
Anthropic lo describe como un indexador de contenido para mejorar los resultados de búsqueda. El entrenamiento es tarea de ClaudeBot, y cada bot tiene su propia regla en robots.txt.
¿Qué pasa si bloqueo Claude-SearchBot?
Anthropic dice que tu contenido deja de indexarse para optimizar la búsqueda, lo que puede reducir tu visibilidad y precisión en las respuestas de búsqueda de Claude.
¿Puedo frenar a Claude-SearchBot en lugar de bloquearlo?
Sí. Anthropic admite la regla no estándar Crawl-delay para sus bots.
¿Cómo sé que una visita es realmente de Claude-SearchBot?
Contrasta la IP de origen con la lista que Anthropic publica en claude.com/crawling/bots.json; Anthropic dice que una IP de esa lista viene de Anthropic.
Términos relacionados
- ClaudeBot
ClaudeBot es el rastreador web de Anthropic que recopila contenido de la web que puede contribuir al entrenamiento de los modelos Claude de Anthropic.
- Claude-User
Claude-User es el agente que usa Anthropic para consultar una página web cuando una persona le hace a Claude una pregunta que lo requiere.
- robots.txt
robots.txt es un archivo de texto plano en la raíz de un sitio web que les dice a los rastreadores qué rutas pueden consultar, según el Robots Exclusion Protocol (RFC 9309).
- PerplexityBot
PerplexityBot es el rastreador de Perplexity que indexa páginas web para que puedan mostrarse y enlazarse en los resultados de búsqueda de Perplexity.
Ejemplo práctico: Tesla, respuestas públicas de IA, 4 de oct. de 2026: el primer escaneo de Tesla hecho por Proofsource, con 25 preguntas de compra y 5 preguntas de marca, una respuesta por pregunta en cada uno de cuatro motores. Una muestra pequeña de una sola marca, mostrada como ejemplo, no como benchmark.
Ve dónde te deja fuera la IA, y qué corregir.
Ve qué preguntas de compra mencionan tu marca, a quién mencionan en tu lugar y qué corregir. 200 respuestas. 25 Prompts/pregunta. Los principales motores de IA. 2 días. Gratis. Sin tarjeta.
Google AI OverviewsGoogle AI Mode
