Yeniden sorulduğunda marka %78 oranında kaldı. Yeniden ifade edildiğinde %55
Alıcı sorularını test etmeye ilişkin tavsiyelerin çoğu, yanıtlar çalıştırmalar arasında değiştiği için her promptu üç ila beş kez sormayı söyler. Bir okumayı hangisinin daha çok oynattığını, bu dalgalanmanın mı yoksa ifadenin mi, bilmek istedik ve ikisini aynı veride ölçtük.
Örneklem: 4-15 Ekim 2026 arasında Proofsource çalışma alanlarından 13.994 yanıt. 69 çalışma alanında 96 marka ve ChatGPT, Perplexity, Claude ve Google AI Overviews'da 1.908 alıcı sorusu; soru, motor ve gün başına ilk yanıt, markanın adını geçiren sorular hariç. Her markanın soruları, her biri tek bir satın alma kararı olan konularda yer alır ve genellikle üç ila beş şekilde ifade edilir.
Markayı anan her yanıtı alın. Sonra aynı motorda aynı soruyu bir sonraki sorduğumuz zamana bakın. 578'in 448'i markayı hâlâ andı, %77,5 (%95 aralığı %73,9 ile %80,7). Motorun önceki yanıtı kelimesi kelimesine döndürdüğü 55 çifti çıkardık; çünkü bir tekrar oynatma ikinci bir çekiliş değildir.
Şimdi aynı kararın diğer ifadelerine, aynı motorda, aynı gün bakın. 5.934'ün 3.270'i markayı andı, %55,1. Sizi anan bir ifade, kardeşleri için, başka bir günde kendisi için olduğundan daha zayıf bir rehberdi.
Yeterli verisi olan 15 markanın hepsi aynı farkı gösterdi
Toplanmış sayılar tüm işi yapan tek bir büyük markayı gizleyebilir; bu yüzden marka bazında çalıştırdık: 15 markanın her türden en az on çifti vardı. 15'inin hepsinde kardeş bir ifade markayı, aynı ifadenin tekrarından daha az andı. Ortanca marka, adını kardeş ifadelerin %35'inde ve tekrarların %70'inde korudu.
Rakipler de aynı şekilde davranır. Bir yanıtta anılan takip edilen bir rakip, o gün kardeş bir ifadede %40,2 oranında (61.804'ün 24.840'ı), aynı ifadede bir sonraki seferde %77,0 oranında (9.539'un 7.347'si) anıldı.
Konu tarafından bakıldığında daha da çarpıcı. Bir markanın bir motorda bir konunun en az bir ifadesinde anıldığı 840 günün yalnızca 102'sinde her ifadede anıldı. Diğer 738'i, yani %87,9'u, bölünmüştü.
Karşılaştırma soruları yanıtların %2,9'unda markayı andı
Bu farkın bir kısmı tek bir soru biçiminden geliyor. "Rakip A mı rakip B mi" diye soran bir alıcı A ve B hakkında bir yanıt alır. Bu türden 1.822 yanıtta marka 53'ünde anıldı, %2,9 (%2,2 ile %3,8). Adı verilen bir rakibe alternatif isteyen sorular %14,9 ile çok daha iyi sonuç verdi; fiyat ya da ekip büyüklüğü kısıtı olan sorular (%15,1) ve düz "en iyisi hangisi" soruları (%13,9) da öyle.
Karşılaştırma sorularını çıkarmak farkı daraltıyor ama kapatmıyor: kardeşler o zaman markayı %62,9 oranında andı (4.746'nın 2.984'ü), yine %77,5'in epey altında.
Şebeke bataryalarını sormanın beş yolu; ikisi Tesla'yı hiç anmadı
Tesla herkese açık çözümlü örneğimizdir. Şebeke depolama konusunda tek bir kararın beş ifadesi, dört motor, üç tarama günü var (4, 8 ve 15 Ekim; 5 Ekim yanıtları 4 Ekim'i kelimesi kelimesine tekrarladı ve sayılmadı); yani ifade başına 12 yeni yanıt.
- "What are the best grid-scale battery storage systems for a utility company?" Tesla 12'nin 12'sinde anıldı.
- Şebeke ölçeğinde depolama için adı verilen bir rakibin en iyi alternatifleri: 12'nin 12'si.
- "Which commercial battery energy storage system should I choose for peak shaving at a large facility?" 12'nin 7'si ve hiçbiri Claude'da değil.
- "How much does a utility-scale lithium iron phosphate battery storage system cost per MWh?" 12'nin 0'ı.
- "What should I look for when comparing turnkey battery storage providers for a solar farm?" 12'nin 0'ı.
Bir ifadeyi kimseye kaybetmemek farklı bir sorundur
Bu son iki sıfır, bir rakibin Tesla'yı yendiği anlamına gelmiyor. 24 yanıtın hiçbiri Tesla'yı ya da diğer üç ifadenin andığı tedarikçilerden herhangi birini anmadı. Motorlar MWh başına fiyatlar ve satın alma kontrol listeleriyle yanıt verdi. Bu şekilde soran bir alıcı ölçütler alır ve ölçütleri kim yazdıysa alıcının daha sonra oluşturacağı kısa listeyi o şekillendirir.
Bu yüzden ifadeleri test ederken kaybeden her ifadeyi iki yığına ayırın. Başka biri anıldı: girmeniz gereken bir kısa liste var ve motorun alıntıladığı sayfalar size nerede olduğunu söyler. Kimse anılmadı: yazmanız gereken bir rehber var; bir motorun nasıl seçileceğini anlatırken alıntıladığı türden bir sayfa.
Tüm bunlar göz önüne alındığında ifadeler nasıl test edilir
İfadeleri biçime göre yazın. "Best" yerine "top" koymak çok az şey test eder. Bir alıcının geçtiği biçimleri kapsayın: açık "en iyisi hangisi" sorusu, aynı sorunun kısıtlı hali, adı verilen bir rakibe alternatifler ve maliyet ya da ölçüt sorusu.
- Ortalamasını almadan önce her ifadeyi ayrı raporlayın. Bir konu puanı 12'de 12 ile 12'de 0'ı ikisini de anlatmayan orta bir sayıda harmanlar.
- Karşılaştırma sorularını kendi gruplarında tutun. Bilmeye değerler ve her ortalamayı aşağı çekerler.
- Her ifadeyi ayrı günlerde tekrarlayın, sonra kelimesi kelimesine tekrar oynatma olan yanıtları çıkarın.
- Kaybeden ifadeyi düzeltin, sonra tam o ifadeyi yeniden sorun. Kardeşindeki bir kazanç sayılmaz.
Proofsource bunu nasıl ele alıyor
Proofsource her ifadeyi, konulara gruplanmış kendi sorusu olarak, plandaki her motorda takip eder. Her yanıt için anılan markaları ve alıntılanan sayfaları kaydeder; böylece kaybeden bir ifade onun yerine kimin anıldığını ya da kimsenin anılmadığını gösterir.
Bu nerede yanlış olabilir
1.908 ifadenin 18'i dışında hepsi Proofsource tarafından her markanın sitesinden ve rakiplerinden üretildi; yani bizim biçimlerimizi izliyorlar. Gerçek alıcılar bizim test etmediğimiz şekillerde soruyor. Soruların çoğu bir ya da iki gün, birkaçı on bir güne kadar soruldu; bu yüzden tekrar rakamı 578 çifte dayanıyor ve geçmişi daha uzun markalara yaslanıyor.
Çift sayıları bağımsız değil: bir yanıt birkaç çiftte yer alabilir; bu yüzden aralıkları yalnızca her sayının ayrı yanıtlardan oluştuğu yerlerde verdik ve ana karşılaştırma için marka bazındaki kontrole dayandık. "Anıldı", çıkarımımızın yanıtı okuması demektir ve bir kaçırma iki taraftan birinde fark olarak görünür. Ekim'deki on iki gün tek bir kesittir ve bir model güncellemesi bunların herhangi birini değiştirebilir.
