Claude-SearchBot nedir?
Claude-SearchBot, Claude'un arama sonuçlarının kalitesini ve ilgililiğini artırmak için web'i okuyan Anthropic botudur. Claude-SearchBot, Claude aramasının arkasındaki bottur: Claude'un iyi sonuçlar için yararlanabileceği bir kaynak olsun diye web'i önceden okur. Onu engellemek bir eğitim kararı değil, bir arama kararıdır.
Claude-SearchBot ne yapar?
Anthropic, Claude-SearchBot'un kullanıcılar için arama sonuçlarının kalitesini iyileştirmek amacıyla web'de gezindiğini ve yanıtların isabetini ve doğruluğunu artırmak için çevrimiçi içerikleri analiz ettiğini söylüyor. Onu devre dışı bırakmak, Anthropic'in sisteminin içeriğinizi arama optimizasyonu için dizine eklemesini engeller; Anthropic'e göre bu, sitenizin kullanıcı arama sonuçlarındaki görünürlüğünü ve isabetini azaltabilir (Anthropic, 7 Nisan 2026).
Claude-SearchBot nasıl davranır?
Anthropic üç botu için de aynı kuralları belgeler:
- robots.txt talimatlarına uyarlar.
- CAPTCHA'ları ya da diğer erişim korumalarını aşmaya çalışmazlar.
- Botu engellemeden yavaşlatmak için standart dışı Crawl-delay kuralını desteklerler.
- Kural ana makine bazında çalışır, bu yüzden her alt alan adının kendi kuralı gerekir.
- IP adresine göre engellemek, botların robots.txt'yi okumasını engelleyebileceği için güvenilir çalışmayabilir.
Claude-SearchBot'a izin verip eğitimi nasıl engellersiniz?
Her bota kendi grubunu verin. Claude tarafından alıntılanmak isteyip eğitim verilerine katkıda bulunmak istemeyen markaların sık yaptığı bir tercihtir. Canlı dosyayı ücretsiz yapay zekâ botu kontrol aracıyla kontrol edin.
# Claude aramasında görünür kalın
User-agent: Claude-SearchBot
Allow: /
User-agent: Claude-User
Allow: /
# İçeriği Anthropic eğitiminin dışında tutun
User-agent: ClaudeBot
Disallow: /Gerçek bir örnekte ne söz konusu?
Herkese açık Tesla örneğinde (4 Eki 2026) Claude, 25 alıcı sorusunda ChatGPT ve Google AI Overviews'un toplamından fazla, 351 sayfa alıntıladı ve 11 yanıtta Tesla'yı andı.
Uzun bir kaynak listesi, alıntılar için geniş bir yer havuzu demektir; sayfalarınızın bu havuz için dizine eklenip eklenmediğine de Claude-SearchBot karar verir. tesla.com bu 351 alıntının birini aldı; çoğu ansiklopedik kaynaklara ve üçüncü taraf sitelere gitti.
Claude-SearchBot'u sitenizde nasıl görürsünüz?
Proofsource yapay zekâ botu isteklerini her gün Cloudflare bölgenizden ya da erişim günlüklerinizden, Anthropic'in yayımladığı IP listesiyle doğrulayarak sayar ve botun ziyaret ettiği hangi sayfaların sonra Claude yanıtlarında alıntı olarak yer aldığını gösterir. Yapay zekâ trafiği ve bot erişimi sayfalarına bakın.
Claude-SearchBot hakkında sık sorulan sorular
Claude-SearchBot eğitim için mi kullanılır?
Anthropic onu, arama sonuçlarını iyileştirmek için içerikleri dizine ekleyen bir bot olarak tanımlıyor. Eğitim ClaudeBot'un işidir ve her botun robots.txt'de kendi kuralı vardır.
Claude-SearchBot'u engellersem ne olur?
Anthropic'e göre içerikleriniz arama optimizasyonu için dizine eklenmez; bu da Claude arama yanıtlarındaki görünürlüğünüzü ve isabetinizi azaltabilir.
Claude-SearchBot'u engellemek yerine yavaşlatabilir miyim?
Evet. Anthropic botları için standart dışı Crawl-delay kuralını destekler.
Bir ziyaretin gerçekten Claude-SearchBot'tan geldiğini nasıl anlarım?
Kaynak IP'yi Anthropic'in claude.com/crawling/bots.json adresinde yayımladığı listeyle karşılaştırın; Anthropic, bu listedeki bir IP'nin Anthropic'ten geldiğini söylüyor.
İlgili terimler
- ClaudeBot
ClaudeBot, Anthropic'in Claude modellerinin eğitimine katkı sağlayabilecek web içeriğini toplayan Anthropic web botudur.
- Claude-User
Claude-User, biri Claude'a sayfa gerektiren bir soru sorduğunda Anthropic'in o web sayfasını getirmek için kullandığı ajandır.
- robots.txt
robots.txt, bir web sitesinin kök dizininde yer alan ve Robots Exclusion Protocol (RFC 9309) kapsamında botlara hangi yolları alabileceklerini söyleyen düz metin dosyasıdır.
- PerplexityBot
PerplexityBot, web sayfalarını Perplexity'nin arama sonuçlarında gösterilip bağlantı verilebilmeleri için dizine ekleyen Perplexity botudur.
Uygulamalı örnek: Tesla, herkese açık yapay zekâ yanıtları, 4 Eki 2026: Proofsource'un Tesla için yaptığı ilk tarama, 25 alıcı sorusu ve 5 marka sorusu, dört motorun her birinde soru başına bir yanıt. Tek bir markadan küçük bir örnek; bir kıyaslama değil, örnek olarak gösteriliyor.
Yapay zekânın sizi nerede atladığını görün, neyi düzelteceğinizi de.
Hangi alıcı sorularının markanızı andığını, yerinize kimin anıldığını ve neyi düzeltmeniz gerektiğini görün. 200 yanıt. 25 Prompts/soru. En iyi yapay zekâ motorları. 2 gün. Ücretsiz. Kart gerekmez.