Che cos’è Claude-SearchBot?
Claude-SearchBot è il crawler di Anthropic che legge il web per migliorare la qualità e la pertinenza dei risultati di ricerca di Claude. Claude-SearchBot è il crawler dietro la ricerca di Claude: legge il web in anticipo perché Claude abbia buoni risultati a cui attingere. Bloccarlo è una decisione sulla ricerca, non sull’addestramento.
Che cosa fa Claude-SearchBot?
Anthropic dice che Claude-SearchBot naviga il web per migliorare la qualità dei risultati di ricerca per gli utenti, analizzando i contenuti online per migliorare la pertinenza e l’accuratezza delle risposte di ricerca. Disattivarlo impedisce al sistema di Anthropic di indicizzare i tuoi contenuti per l’ottimizzazione della ricerca, il che secondo Anthropic può ridurre la visibilità e l’accuratezza del tuo sito nei risultati di ricerca degli utenti (Anthropic, 7 aprile 2026).
Come si comporta Claude-SearchBot?
Anthropic documenta le stesse regole per tutti e tre i suoi bot:
- Rispettano le direttive del robots.txt.
- Non cercano di aggirare CAPTCHA o altre misure anti-elusione.
- Supportano la regola non standard Crawl-delay, per rallentare un bot senza bloccarlo.
- Una regola vale per singolo host, quindi ogni sottodominio ne ha bisogno di una propria.
- Bloccare per indirizzo IP potrebbe non funzionare in modo affidabile, perché può impedire ai bot di leggere il robots.txt.
Come consenti Claude-SearchBot bloccando l’addestramento?
Dai a ogni bot il suo gruppo. È la scelta comune dei brand che vogliono essere citati da Claude senza contribuire ai dati di addestramento. Controlla il file pubblicato con la verifica gratuita dei crawler di IA.
# Resta trovabile nella ricerca di Claude
User-agent: Claude-SearchBot
Allow: /
User-agent: Claude-User
Allow: /
# Tieni i contenuti fuori dall'addestramento di Anthropic
User-agent: ClaudeBot
Disallow: /Che cosa c’è in gioco, in un esempio reale?
Nell’esempio pubblico di Tesla (4 ott 2026), Claude ha citato 351 pagine in 25 domande d’acquisto, più di ChatGPT e Google AI Overviews messi insieme, e ha menzionato Tesla in 11 risposte.
Un lungo elenco di fonti è un grande bacino di posti per le citazioni, e Claude-SearchBot decide se le tue pagine vengono indicizzate per esso. tesla.com ne ha ottenuto uno su 351; la maggior parte è andata a siti di riferimento e di terze parti.
Come vedi Claude-SearchBot sul tuo sito?
Proofsource conta ogni giorno le richieste dei crawler di IA dalla tua zona Cloudflare o dai tuoi log di accesso, verificate con l’elenco di IP pubblicato da Anthropic, e mostra quali pagine scansionate finiscono citate nelle risposte di Claude. Vedi Traffico dall’IA e Accesso dei crawler.
Domande frequenti su Claude-SearchBot
Claude-SearchBot viene usato per l’addestramento?
Anthropic lo descrive come un indicizzatore di contenuti per migliorare i risultati di ricerca. L’addestramento è compito di ClaudeBot, e ogni bot ha la sua regola nel robots.txt.
Che cosa succede se blocco Claude-SearchBot?
Anthropic dice che i tuoi contenuti smettono di essere indicizzati per l’ottimizzazione della ricerca, il che può ridurre la tua visibilità e accuratezza nelle risposte di ricerca di Claude.
Posso rallentare Claude-SearchBot invece di bloccarlo?
Sì. Anthropic supporta la regola non standard Crawl-delay per i suoi bot.
Come faccio a sapere che una visita è davvero di Claude-SearchBot?
Confronta l’IP di origine con l’elenco che Anthropic pubblica su claude.com/crawling/bots.json; Anthropic dice che un IP in quell’elenco proviene da Anthropic.
Termini correlati
- ClaudeBot
ClaudeBot è il crawler web di Anthropic che raccoglie contenuti dal web che possono contribuire all’addestramento dei modelli Claude di Anthropic.
- Claude-User
Claude-User è l’agente che Anthropic usa per scaricare una pagina web quando una persona fa a Claude una domanda che lo richiede.
- robots.txt
robots.txt è un file di testo semplice nella root di un sito che indica ai crawler quali percorsi possono scaricare, secondo il Robots Exclusion Protocol (RFC 9309).
- PerplexityBot
PerplexityBot è il crawler di Perplexity che indicizza le pagine web perché possano comparire ed essere linkate nei risultati di ricerca di Perplexity.
Esempio svolto: Tesla, risposte pubbliche dell’IA, 4 ott 2026: la prima scansione di Tesla fatta da Proofsource, con 25 domande d’acquisto e 5 domande sul brand, una risposta per domanda su ciascuno di quattro motori. Un piccolo campione di un solo brand, mostrato come esempio, non come benchmark.
Scopri dove l’IA ti lascia fuori, e cosa correggere.
Scopri quali domande d’acquisto menzionano il tuo brand, chi viene menzionato al posto tuo e cosa correggere. 200 risposte. 25 Prompts/domanda. I migliori motori di IA. 2 giorni. Gratis. Senza carta.
Google AI OverviewsGoogle AI Mode
