Yapay zekâ botlarının sitenize ulaşabildiğini ve içeriği okuyabildiğini kontrol edin.
Proofsource'taki Bot Erişimi, yapay zekânın sitenizden öğrenip öğrenemeyeceğini belirleyen iki şeyi kontrol eder: GPTBot, ClaudeBot, PerplexityBot ve diğer yapay zekâ botlarının içeri alınıp gerçekten sayfa sunulup sunulmadığını ve aldıkları sayfanın sizin sözlerinizi mi yoksa boş bir JavaScript kabuğunu mu içerdiğini.
| Bot | robots.txt | Sunucu yanıtı |
|---|---|---|
| GPTBot (OpenAI eğitimi) | İzin verildi | Reddedildi (403) |
| OAI-SearchBot (ChatGPT araması) | İzin verildi | Sunuldu (200) |
| ChatGPT-User (ChatGPT'nin web'de gezinmesi) | İzin verildi | Sunuldu (200) |
| ClaudeBot (Anthropic) | İzin verildi | Reddedildi (403) |
| PerplexityBot (Perplexity) | İzin verildi | Sunuldu (200) |
robots.txt'nizdeki her yapay zekâ botu için bir karar.
Proofsource robots.txt dosyanızı okur ve on yapay zekâ botu için bir karar verir. Hangi botun ne yaptığını bilmek önemlidir: OAI-SearchBot ve PerplexityBot canlı yanıtlar için sayfa çeker, GPTBot ve Google-Extended ise eğitim verilerini yönetir; böylece yapay zekâ aramasından kaybolmadan eğitimi engelleyebilirsiniz.
- GPTBot, OAI-SearchBot, ChatGPT-User, ClaudeBot, Claude-SearchBot, PerplexityBot, Google-Extended, Applebot-Extended, CCBot ve Bytespider
- İzin verildi veya engellendi; dosya okunamıyorsa belirlenmedi, asla tahmin değil
- Google-Extended ayrı bir bot değil, bir robots.txt belirtecidir ve öyle kontrol edilir
| Token | Kullanım amacı | Karar |
|---|---|---|
| GPTBot | OpenAI model eğitimi | İzin verilmedi |
| OAI-SearchBot | ChatGPT arama sonuçları | İzin verildi |
| ClaudeBot | Anthropic taraması | İzin verildi |
| PerplexityBot | Perplexity yanıtları | İzin verildi |
| Google-Extended | Gemini ve Vertex AI eğitimi | İzin verilmedi |
robots.txt bir ricadır. Kimin gireceğine sunucu karar verir.
Bir site robots.txt'de GPTBot'a izin verip yine de bir CDN bot güvenlik duvarından 403 ile yanıt verebilir. Proofsource ana sayfanızı GPTBot, OAI-SearchBot, ChatGPT-User, ClaudeBot ve PerplexityBot olarak ister ve sunucunuzun gerçekte ne döndürdüğünü kaydeder. Tek başına bir robots.txt kontrol aracı hepsini izinli olarak raporlardı.
- Bot başına sunuldu, geri çevrildi veya belirsiz
- Her botun aldığı durum kodu
- robots.txt kontrollerinin kaçırdığı CDN ve güvenlik duvarı engellerini yakalar
GPTBot olarak GET / → 403 Your request was blocked.
Neden robots.txt değil, bir CDN bot ayarıydı. Tek başına bir robots.txt kontrol aracı her botu izinli olarak raporlardı.
Bir botun sayfanızın ne kadarını gerçekten okuyabildiğini görün.
Birçok yapay zekâ botu ham HTML'i okur ve JavaScript çalıştırmaz. Proofsource, bir tarayıcının oluşturduğu kelimeleri ham HTML'deki kelimelerle karşılaştırır. İstemci tarafında oluşturulan bir sayfa tarayıcıda binlerce kelime gösterirken bir bota birkaç düzine kelime gösterebilir. İçeriğiniz ancak JavaScript çalıştıktan sonra görünüyorsa, yapay zekâ botlarının çoğu onu hiç görmez.
- Sayfa başına, oluşturulmuş sayfadaki kelimeler ve ham HTML'deki kelimeler
- Gövde metni, H1'i veya taranabilir bağlantısı olmayan sayfaları işaretler
- Sunucu tarafı oluşturma veya ön oluşturmayı yayına aldıktan sonra yeniden kontrol edin
| Kontrol et | Sonuç |
|---|---|
| HTML'deki gövde metni | Eksik |
| HTML'deki H1 | Eksik |
| Bir botun izleyebileceği bağlantılar | Bulunamadı |
Yapay zekâ sizi okuyamıyorsa sizi öneremez.
Sessiz engelleri bulun
CDN bot ayarları, ekibinizde kimse fark etmeden yapay zekâ botlarını geri çevirebilir. Sunucu kontrolü bunu gösterir.
Metinlerinizi görünür kılın
Yalnızca JavaScript ile görüntülenen bir sayfa, çoğu yapay zekâ botu için neredeyse boştur. Görüntüleme kontrolü bunun ne kadar yakın olduğunu ölçer.
Eğitimi engelleyin, aramayı koruyun
Bot başına bir karar, hangi yapay zekâ sistemlerine tam olarak izin verdiğinizi gösterir; böylece eğitimi engellemek bir kaza değil, bir tercih olur.
Alıcıların sorduğu sorular
GPTBot'un web siteme erişip erişemediğini nasıl kontrol ederim?
İki şeyi kontrol edin. Birincisi robots.txt: GPTBot'u engellememeli. İkincisi sunucu: GPTBot'un user agent'ıyla bir sayfa isteyin ve CDN'den veya güvenlik duvarından 403 değil, 200 aldığınızı doğrulayın. Proofsource iki kontrolü de yapar ve ayrıca sayfanın okunabilir metin içerdiğini doğrular.
GPTBot ile OAI-SearchBot arasındaki fark nedir?
GPTBot, OpenAI modellerini eğitmek için kullanılabilecek içerik toplar. OAI-SearchBot, ChatGPT arama sonuçları için sayfa çeker; ChatGPT-User ise bir kullanıcının sohbeti gerektirdiğinde bir sayfayı çeker. GPTBot'u engellemek sizi ChatGPT aramasından çıkarmaz, OAI-SearchBot'u engellemek ise çıkarır.
Google-Extended nedir?
Google-Extended ayrı bir bot değil, bir robots.txt belirtecidir. Engellemek, Google'a içeriğinizi Gemini ve Vertex AI model eğitimi için kullanmamasını söyler. Google Arama'yı etkilemez.
Yapay zekâ botları JavaScript siteleri okuyabilir mi?
Birçoğu okuyamaz. Bazı yapay zekâ botları yalnızca sunucunun döndürdüğü ham HTML'i okur ve JavaScript çalıştırmaz; bu yüzden istemci tarafında oluşturulan bir sayfa onlara neredeyse boş görünebilir. Sunucu tarafında oluşturma ya da ön oluşturma, metni her botun okuyabileceği şekilde HTML'e koyar.
Sitem neden benim haberim olmadan yapay zekâ botlarını engellesin?
CDN ve güvenlik sağlayıcıları bot engelleme ayarları sunar ve bazıları yapay zekâ eğitim botlarını varsayılan olarak ya da tek bir anahtarla engeller. Engelleme sunucuda gerçekleşir, bu yüzden robots.txt hâlâ bota izin verildiğini söyler. Bunu yalnızca bot gibi yapılan bir istek ortaya çıkarır.
Proofsource'u ücretsiz deneyebilir miyim?
Evet. 200 yanıt. 25 Prompts/soru. En iyi yapay zekâ motorları. 2 gün. Ücretsiz. ChatGPT, Perplexity, Claude ve Google AI Overviews üzerinde 25 alıcı sorusu, bugün ve yarın. Kart gerekmez. İkinci taramadan sonra tarama durur ve yanıtlarınız hesabınızda kalır.
Proofsource ne kadar?
Herkes için tek fiyat kartı: planlar aylık $9 tutarından başlar (5 soru, ChatGPT üzerinde, her hafta). Her marka her gün (marka başına aylık $28) veya her hafta ($7) için bir ücret öder, artı seçtiğiniz her motordaki her soru. Her planda sınırsız ekip üyesi. Aşım ücreti yok.
Platformun diğer özellikleri
Ask Proof
Yapay zekâ görünürlüğünüzle ilgili soruları kendi verilerinizden yanıtlayan ve her rakamın arkasındaki sorguları gösteren bir asistan.Ask Proof ürününü keşfedin
Yapay zekâ görünürlüğü
Her yapay zekâ motorunda bahsedilme oranı, ses payı ve ortalama konum; her rakamda %95 Wilson aralığıyla.Yapay zekâ görünürlüğü ürününü keşfedin
Prompts
Takip ettiğiniz alıcı soruları: konuya göre gruplanmış, markalı veya markasız olarak etiketlenmiş, arama talebine göre sıralanmış; her motorun yaptığı aramalarla birlikte.Prompts ürününü keşfedin
Yapay zekânın sizi okuyabildiğinden emin olun.
Yapay zekânın markanızı anıp anmadığını, yerinize kimi andığını ve neyi düzeltmeniz gerektiğini görün. 200 yanıt. 25 Prompts/soru. En iyi yapay zekâ motorları. 2 gün. Ücretsiz. Kart gerekmez · satış görüşmesi yok.
Google AI OverviewsGoogle AI Mode
