Düz bir getirme 72 sitenin 7'sinde önemli bir sayfanın ana metnini kaçırdı
ChatGPT biri için bir sayfa okuduğunda, sunucunun geri gönderdiği HTML'i alır ve durur. Claude'un okuyucusu ve Perplexity'nin botu da öyle. Bir betiğin yükleme sonrasında yazdığı hiçbir şey onların aldığı şeyde yoktur. Yani soru, önemli kelimelerin o ilk yanıtta olup olmadığıdır.
Proofsource, 5 ile 17 Ekim 2026 arasında çalışma alanlarında takip edilen her markanın ana sayfasını ve en fazla dört önemli sayfasını kontrol etti. Her sayfa iki kez getirildi: betik çalıştırmayan düz bir istek olan kendi botumuzla ve betik çalıştıran bir tarayıcıyla. Tarayıcının sürümünü metin bloklarına ayırdık ve kelimelerinin ne kadarının düz getirmede de çıktığını saydık.
72 sitedeki 211 sayfa kullanılabilir bir okuma verdi. Medyan sayfa %95 puan aldı ve 211 sayfanın 144'ü %90 veya üzeri aldı. 24 sayfa yarının altında puan aldı.
24 sayfanın hepsinde eksik metni elle okuduk. Bunlardan on ikisi, 7 sitede, bir alıcının okuyacağı metni kaybetmişti. Bu 72 sitenin 7'si, yani %9,7 (%95 aralığı %4,8 ile %18,7).
%50'nin altında puan alan sayfaların yarısı yanlış alarmdı
Diğer on iki sayfa alarm verici görünüyordu ama öyle değildi. Bir siteden dört sayfada eksik metin bir çerez onay paneliydi. Büyük bir yazılım sitesinden beş sayfa %7 ile %16 arasında puan aldı, çünkü satır içi görsel kodu kelime olarak sayılıyordu. Bir değerlendirme formu, canlı bir işlem sayacı ve bir müzik çalar geri kalanını oluşturdu.
Bu yüzden puana güvenmeden önce blokları okuyun. Bir yüzde, eksik bir fiyat tablosunu eksik bir çerez bildiriminden ayıramaz. Neyin eksik olduğunun listesi ayırabilir.
Neler kayboldu: başlıklar, vaka çalışmaları ve bir fiyat tablosu
Anonimleştirilmiş on iki gerçek kayıp:
- Üç ana sayfa bir iki kelimeyle döndü. İkisi düz getirmeye şirket adından başka bir şey vermedi.
- Bir yazılım şirketinin vaka çalışması dizini ve bir vaka çalışması %0 aldı. Her müşteri alıntısını bir betik yazıyordu.
- Bir geliştirici aracının fiyat sayfası %15 aldı. Ücretsiz kademenin kotası, deneme koşulları ve plan sınırlarının hepsi yükleme sonrasında geldi.
- Bir sitenin blog dizini ve iletişim sayfası da ana sayfasıyla birlikte boştu.
- Bir tasarımcının portfolyosu ana sayfasındaki biyografiyi ve tüm hizmetler listesini kaybetti.
- Büyük bir pazar yerinin ana sayfası ve hizmetler sayfası %18 ve %7'sini korudu. İlanlar, fiyatlar ve puanlar sayfadan sonra yükleniyor.
Ürün sayfaları en iyi dayandı: 31'den 1'i yarının altında
Ürün sayfaları kontrol ettiğimiz en güvenli türdü: 31'i bir okuma verdi, medyan %92 aldı ve yarının altındaki tek sayfada yalnızca bir değerlendirme formu eksikti. Ana sayfalar en riskli türdü: 72'nin 8'i yarının altında puan aldı ve on iki gerçek kaybın beşi ana sayfalardı.
Google sayfayı oluşturur. ChatGPT'nin okuyucusu, Claude ve Perplexity oluşturmaz.
Vercel ve MERJ, Aralık 2024'te, OpenAI'ın üç botu, ClaudeBot ve PerplexityBot dahil büyük yapay zekâ botlarının hiçbirinin JavaScript oluşturmadığını buldu. Gemini, Googlebot'un altyapısını kullanıyordu ve oluşturuyordu.
Daha yeni bir log, biri sorduğunda bir sayfayı getiren okuyucular için de aynısını söylüyor. Forge, 24 Eylül 2026'ya kadar 30 gün boyunca bir haber sitesine gelen istekleri saydı. ChatGPT-User 37.045 sayfa okuması yaptı ve bir sayfayı yüklerken hiç betik getirmedi. Claude-User 10.028, PerplexityBot 3.193 okuma yaptı; onlar da hiç betik getirmedi. Ertesi günkü bir testte ChatGPT, Claude ve Gemini'nin her biri yalnızca HTML'de yazan kod kelimesini bildirdi, bir betiğin eklediği iki kelimeden hiçbirini bildirmedi.
Google farklı. Belgeleri, başsız bir Chromium'un sayfayı oluşturduğunu ve Google'ın oluşturulmuş HTML'i dizine eklediğini söylüyor; bir sayfanın AI Overviews veya AI Mode'da görünmesi için de yalnızca dizine eklenmiş ve snippet'e uygun olması gerekiyor. Yani betiklerinizin yazdığı metin Google'ın yapay zekâ yanıtlarına ulaşabilir, ama ChatGPT aynı sayfayı canlı okuduğunda yine de eksik olabilir.
Açık bir soru: bir geliştirici 30 Eylül'de, OpenAI'ın arama ve eğitim botlarının 25 Eylül'den itibaren kendi Next.js sitelerinde sayfaları oluşturmaya başladığını bildirdi. OpenAI bunu duyurmadı ve bu, ChatGPT-User'ın yukarıda gösterdiğini değiştirmezdi.
Kendi sayfalarınızı on dakikada kontrol edin
İlk bakış için bir araca ihtiyacınız yok.
- Sayfada önemli olan üç cümle seçin: başlık, bir fiyat, bir müşteri alıntısı.
- Sayfa kaynağını açın (oluşturulmuş sayfayı gösteren öğe denetleyicisini değil) ve her birini arayın. Bir terminalden URL'yi curl ile getirin ve grep ile arayın.
- Tarayıcı ayarlarınızda site için JavaScript'i kapatın ve yeniden yükleyin. Geriye kalan, kabaca bu botların aldığı şeydir.
- Eksik çerez bildirimlerini, sohbet bileşenlerini ve açılır pencereleri göz ardı edin. Başlıkları, ürün açıklamalarını, fiyatları, vaka çalışmalarını ve SSS'leri sunucu tarafında oluşturma, statik üretim veya ön oluşturma ile sunucunun HTML'ine taşıyın.
- Tarayıcınız sayfayı yüklerken düz bir getirme 403 alıyorsa CDN'inizi veya güvenlik duvarınızı kontrol edin. Dört site daha botumuzu bu şekilde reddetti. Onları dışarıda bıraktık, çünkü bilinmeyen bir botu engelleyen bir güvenlik duvarı doğrulanmış yapay zekâ botlarına yine de izin veriyor olabilir.
Proofsource bunu nasıl ele alıyor
Proofsource bu kontrolü takip edilen her markanın ana sayfasında ve en fazla dört önemli sayfasında çalıştırır: betik çalıştırmayan ve robots.txt'e uyan düz bir getirmeyi, aynı sayfanın oluşturulmuş bir kopyasıyla karşılaştırır. Düz getirmenin aldığı kelime payını gösterir, eksik blokları okuduklarının yanında listeler ve o sayfa için düzeltmeler önerir. Kendi ana sayfamız 4 Ekim'de kontrol ettiğimizde %0 aldı. Düz bir getirme 2.416 kelimesinin 9'unu aldı. Site artık ön oluşturuluyor ve ana sayfanın düz getirmesi metnini döndürüyor.
Bunun nerede yanlış olabileceği
Botumuz GPTBot değil. Kendini ProofBot olarak tanıtıyor ve botlara adlarına göre davranan bir site yapay zekâ botlarına farklı bir şey sunabilir. Bizi reddeden dört site bunun görünür örneği.
Gerçek kayıplar ile yanlış alarmlar arasındaki ayrım, eksik metnin sınırlı örneklerini elle okumamıza dayanıyor ve yalnızca %50'nin altında puan alan sayfaları okuduk. Bir sayfa %78 alıp yine de önemli bir şeyi kaçırıyor olabilir: o puanı alan bir ana sayfa nasıl çalışır adımlarını ve entegrasyon listesini kaybetmişti. Yani 7 site, önemli bir şey kaybeden sayfalar için bir alt sınırdır. Puanlama kuralının, puanları aşağı çeken satır içi görsel kodu gibi bilinen gürültüleri de var.
Pazar yeri ilanları gibi kişiselleştirilmiş içerik ziyaretçiler arasında farklılık gösterebilir. Her sitenin okuması, 5 ile 17 Ekim arasındaki en son kontrolüdür ve siteler değişir. 72 site çoğunlukla Proofsource çalışma alanı olan küçük şirketler ile takip ettikleri bazı büyük markalardan oluşuyor; web'in rastgele bir örneklemi değil.
Dış kanıtlar da zayıf: bir 2024 araştırması, bir haber sitesinin logu ve bir geliştiricinin raporu.
