Değişimi takip edin ve onu neyin sağladığını kanıtlayın.

Aynı şeyi iki kez ölçün: aynı sorular, aynı motorlarda, aynı sıklıkta, aynı sabitlenmiş rakip listesine karşı (3. bölüm). Çalıştırmalar arasında soru setini değiştirirseniz iki farklı örneği karşılaştırırsınız; yeni soruları bunun yerine kendi serisi olarak başlatın.

Sonra çalıştırmaları soru soru karşılaştırın. İki %95 aralığının örtüşüp örtüşmediğine bakmak göründüğünden çok daha katıdır: Payton, Greenstone ve Schenker 2003'te, aynı popülasyonlardan gelen iki aralığın zamanın %99'undan fazlasında örtüştüğünü gösterdi; yani örtüşme kontrolü %1'lik bir test gibi davranır ve gerçek düşüşleri yutar. 200 soruda %42'den %30'a bir düşüş örtüşen %95 aralıkları gösterir, ama standart bir iki oran testi p = 0,012 verir. 30 soru sizi bıraktıysa ve 6 soru sizi aldıysa, bu değişimler üzerinde McNemar'ın eşleştirilmiş testi yaklaşık 0,00006'lık bir p verir (hesaplanmış örnek).

Kalıcı olmasını bekleyin. Günlük takibimizde, tek bir yanıttaki değişimlerin %47'si bir gün sonra geri dönmüştü; bir değişimi iki gün daha izleyebildiğimiz yerlerde ise üç gün boyunca kalıcı olma oranı %36,7'ydi. Takip edilen bir rakip aynı haftanın pazartesi günü %75, cuma günü %45 okundu; bu 30 puanlık bir düşüş gibi görünür, ama hafta boyunca 140 yanıtın 89'unda, yani %63,6'sında anıldı ve hiçbir şey düşmemişti (sıklık çalışması).

Bir değişim iki üç gün kalıcı olduğunda ya da iki ölçümün aralıkları ayrıştığında harekete geçin. Her eşik geçişinde tetiklenen bir uyarı, bu kadar gürültülü sayılarda sürekli tetiklenir.

1. 1. hafta, başlangıç ölçümü. Sorularınızı seçin, her motora sorun, kimin anıldığını ve neyin alıntılandığını kaydedin (2. bölüm). Bir gün arayla iki kez çalıştırın.
2. 2. hafta, erişim. Her botu önemli sayfalarınıza karşı kontrol edin, CDN engellerini ve yalnızca JavaScript ile gelen içeriği düzeltin (4. bölüm).
3. 3. hafta, kimlik ve kaynaklar. Tek cümlelik tanımınızı her yerde yayımlayın ve sizi dışarıda bırakan en çok alıntılanan beş sayfaya başvurun (5. bölüm).
4. 4. hafta, yeniden ölçüm. Aynı soruları aynı motorlarda sorun. Aralığın ötesine geçeni tutun; geçmeyeni yeniden düşünün.