A/B testi, iki farklı versiyonu aynı anda gerçek kitleye göstererek hangisinin daha iyi çalıştığını ölçme yöntemidir. Pazarlamada "bence bu daha iyi" cümlesini "veriye göre bu daha iyi" cümlesine çeviren tek araçtır. Ama uygulamada çoğu test yanlış kuruluyor: örneklem yetersiz kalıyor, aynı anda beş şey değişiyor, sonuç istatistiksel anlam taşımadan karar veriliyor. Bu rehberde doğru A/B testi kurmanın adımlarını, kanal bazlı test fikirlerini ve sonuçları yorumlama kurallarını anlatıyoruz.
Testin temel kuralı: tek değişken
A versiyonunda konu satırını, görseli ve butonu birden değiştirip B'den daha iyi sonuç aldığınızda hiçbir şey öğrenmiş olmazsınız — hangi değişikliğin işe yaradığını bilemezsiniz. Test edilecek her öğe ayrı bir testi hak eder.
Bunun tek istisnası, tamamen farklı iki yaklaşımı karşılaştırdığınız durumdur: örneğin görsel ağırlıklı bir e-posta ile düz metin bir e-posta. Burada amaç öğeyi değil konsepti test etmektir; kazanan konseptin içinde sonra öğe testleri yaparsınız.
Neyi test etmeli? Etki sırasına göre
Zamanınız sınırlıysa büyük etkili değişkenlerden başlayın. Buton rengini test etmek popülerdir ama etkisi genelde ihmal edilebilir düzeydedir:
| Etki | Test edilecek |
|---|---|
| Yüksek | Teklifin kendisi (indirim vs ücretsiz kargo), hedef segment, kanal seçimi |
| Orta | Konu satırı, açılış cümlesi, gönderim zamanı, görsel türü |
| Düşük | Buton rengi, yazı tipi, emoji kullanımı |
Kural şu: önce "ne söylüyorum ve kime söylüyorum" sorusunu test edin, sonra "nasıl söylüyorum" sorusuna geçin.
Testi doğru kurmak
1. Hipotez yazın
"Konu satırında ürün adı geçerse açılma oranı artar, çünkü kullanıcı neyle ilgili olduğunu anlar." Hipotez yazmak zorunluluğu, rastgele test yapmayı engeller ve sonucu yorumlamanızı kolaylaştırır.
2. Başarı metriğini önceden seçin
Testten sonra "hangi metrikte kazandık?" diye bakmak, kendinizi kandırmanın en kolay yoludur. Metrik önceden belirlenmeli ve nihai hedefe yakın olmalı: açılma oranı değil dönüşüm, tıklama değil ciro.
3. Örneklem büyüklüğünü hesaplayın
Bu adım en çok atlanan ve en çok yanlış karara yol açan adımdır. 200 kişilik bir gönderimde %2'lik fark tamamen tesadüf olabilir. Kabaca bir kural: her varyant için en az 1.000 kişi ve en az 100 dönüşüm hedefleyin. Küçük listelerde test yapacaksanız daha büyük farklar arayın; %1-2'lik farkları ölçmeye çalışmayın.
4. Süreyi baştan belirleyin
"B öne geçti, testi durdurayım" en yaygın hatadır. İlk saatlerde öne geçen varyant çoğu zaman sonda kaybeder. Testi en az bir tam haftalık döngü boyunca çalıştırın; hafta içi ve hafta sonu davranışı farklıdır.
Rastgele bölme şart: Listeyi alfabetik ya da kayıt sırasına göre ikiye bölerseniz test bozulur — eski müşteriler bir tarafta, yeniler diğer tarafta toplanır. Bölme rastgele yapılmalı ve iki grubun segment dağılımı benzer olmalıdır.
Kanal bazlı test fikirleri
E-posta
- Gönderen adı: marka adı mı, kişi adı mı?
- Konu satırı uzunluğu: kısa ve merak uyandıran mı, uzun ve açıklayıcı mı?
- Tek ürün odaklı mı, çoklu ürün listesi mi?
- Gönderim saati: sabah mı, akşam mı?
- Görsel başlıklı şablon mu, sadece metin mi?
- Tek buton mu, iki buton mu?
- İlk cümlede marka adı geçsin mi?
- Sepet hatırlatmasında gecikme süresi: 45 dakika mı, 3 saat mi?
Açılış sayfaları
- Form alanı sayısı: 2 alan mı, 5 alan mı?
- Başlıkta fayda mı, özellik mi vurgulanıyor?
- Fiyatın görünür olması dönüşümü artırıyor mu?
Testleri kanallar arasında tutarlı biçimde yürütmek için kampanya ve varyant yönetimini tek yerden yapmak gerekir; kampanya modülleri varyant tanımlama ve otomatik kazanan seçimi gibi işleri üstlenir.
Sonuçları yorumlarken dikkat edilecekler
- Anlamlılık: Fark tesadüf olabilir mi? Küçük örneklemde %5'lik farklar genelde gürültüdür.
- Aşağı akış etkisi: Açılma oranı artan varyant, dönüşümü düşürmüş olabilir. Zinciri sonuna kadar takip edin.
- Segment kırılımı: B versiyonu genelde kaybetmiş olabilir ama sadık müşterilerde kazanmış olabilir. Bu tür bulgular en değerlileridir.
- Yenilik etkisi: Yeni format ilk seferde iyi sonuç verip tekrarında sönebilir. Kalıcı kararlar için tekrarlayan testler yapın.
- Kaybeden de bilgidir: "Fark yok" sonucu, o değişkene bir daha zaman harcamamanız gerektiğini söyler.
Her testin sonucunu kısa bir notla kaydedin: hipotez, kurulum, sonuç, karar. Altı ay sonra aynı testi tekrar yapmak, en yaygın kaynak israfıdır.
Küçük listelerde ne yapmalı?
3.000 kişilik bir listeniz varsa klasik A/B testi çoğu zaman anlamlı sonuç vermez. Üç alternatif yol var: testleri birden fazla kampanyaya yayarak veri biriktirmek; küçük farklar yerine radikal farklılıklar test etmek (aynı teklifin iki versiyonu yerine iki farklı teklif); ya da niteliksel yönteme dönmek — 10 müşteriye doğrudan sorup neden tıklamadıklarını öğrenmek. Küçük ölçekte müşteriyle konuşmak, istatistikten daha hızlı öğretir.
Sık Sorulan Sorular
Kaç varyant test edebilirim?
İki varyantla başlayın. Üç ve üzeri varyant, her gruba düşen örneklemi böler ve anlamlı sonuca ulaşmayı zorlaştırır. Çok varyantlı testler ancak yüksek trafikli sayfalarda ve büyük listelerde anlamlıdır.
Test sonucu her zaman uygulanmalı mı?
Sonuç anlamlıysa ve marka değerlerinizle çelişmiyorsa evet. Ancak kısa vadede kazanan bazı taktikler (aşırı aciliyet, abartılı vaat) uzun vadede güven kaybettirir. Test tek karar mekanizmanız olmamalı; marka kararlarıyla birlikte değerlendirin.
Otomatik kazanan seçimi güvenilir mi?
Yeterli örneklem ve süre şartı sağlandığında pratik bir kolaylıktır; özellikle konu satırı testlerinde işe yarar. Yine de kazanan seçim kriterinin hangi metriğe göre çalıştığını kontrol edin — açılma oranına göre seçim yapan bir sistem, dönüşümü düşük bir varyantı kazanan ilan edebilir.
Ne sıklıkla test yapmalıyım?
Sürekli bir test kültürü, ara sıra yapılan büyük testlerden daha değerlidir. Ayda 2-4 test hedefleyin ve sonuçları ekiple paylaşın. Terim ve metrik tanımlarında ortak dil kurmak için pazarlama sözlüğünden faydalanabilirsiniz.
Özet
A/B testi, pazarlama kararlarını fikirden veriye taşıyan en pratik yöntemdir — ama ancak doğru kurulduğunda. Tek değişken değiştirin, hipotez yazın, metriği önceden seçin, örneklemi ve süreyi hesaplayın, sonuçları segment kırılımında okuyun ve her testi kayıt altına alın. Test altyapınızı kurmak için paketleri inceleyebilir veya ekibimize danışabilirsiniz.