← Sözlüğe Dön CRM & Otomasyon

Holdout Group Nedir?

Bekletme Grubu

Holdout group, bir kampanya veya otomasyonun gerçek katkısını ölçmek için bilinçli olarak hiç mesaj gönderilmeyen referans gruptur.

Yazan: Adem Demir Son güncelleme:

Bekletme Grubu (Holdout Group) = Bir kampanyanın, akışın ya da bütün CRM programının gerçek katkısını ölçmek için rastgele seçilip belirli bir süre boyunca o iletişimi hiç almayan kişi grubu · katkı = (programı alan grupta kişi başına gelir − bekletme grubunda kişi başına gelir) × programı alan kişi sayısı

Sayılarla ne demek?

E-posta ve SMS raporları, mesaja tıklayıp sipariş veren herkesi kanalın başarısına yazar. Oysa bu kişilerin bir kısmı mesaj hiç gelmeseydi de alışveriş yapacaktı. Bekletme grubu, bu "zaten olacak" satışları ayırmanın en doğrudan yoludur: programı hiç almayan benzer kişiler ne kadar harcıyor, programı alanlar ne kadar harcıyor?

Bekletme grubu kontrol grubunun özel bir türüdür. Kontrol grubu çoğu zaman eski versiyonu alır; bekletme grubu ise ölçülen iletişimi tamamen almaz. Bu sayede sonuç "hangi versiyon daha iyi?" sorusuna değil, "bu program ne kadar ek gelir yaratıyor?" sorusuna yanıt verir.

Üç düzeyde kurulabilir. Tek bir kampanya için (bu indirim duyurusu ek satış getirdi mi?), tek bir akış için (sepet kurtarma akışı olmasaydı ne olurdu?) ya da bütün CRM programı için (e-posta ve SMS iletişiminin toplam katkısı ne?). Kapsam büyüdükçe cevap daha stratejik, gerekli süre ve grup büyüklüğü de daha fazla olur.

Bekletme grubu düzeyleri

DüzeySoruTipik süre
KampanyaBu gönderim ek satış getirdi mi?Birkaç gün
AkışBu akış olmasa ne olurdu?Birkaç hafta
KanalSMS iletişimi ne katıyor?Bir iki ay
Program geneliBütün CRM iletişimi ne katıyor?Bir çeyrek
Teklifİndirim olmasa da alırlar mıydı?Kampanya süresi

Son satır kar açısından çok öğretici. İndirim kampanyasının bir bölümünü indirimsiz bırakılan bir gruba karşı ölçmek, indirimin kaç ek sipariş getirdiğini ve kaç siparişin marjını boşa harcadığını gösterir.

Kurarken

  1. Düzeyi seçin. Kampanya, akış ya da program.
  2. Grubu rastgele ayırın. Çoğunlukla yüzde 5 ile 10 arası.
  3. İşlemsel mesajları dışarıda tutun. Sipariş ve kargo bildirimleri devam etsin.
  4. Süreyi baştan belirleyin. Sonra grubu programa geri alın.
  5. Kişi başına geliri karşılaştırın. Tıklama değil, sipariş ve katkı.

Uygulamada ne oluyor?

En sık durum, bekletme grubunun hiç kurulmaması. Kanalın başarısı yalnızca kendi raporuyla ölçülüyor; e-posta gelirinin ne kadarının gerçekten e-postadan kaynaklandığı bilinmiyor.

İkinci gözlem, grubun "kaybedilecek satış" endişesiyle çok küçük tutulması. Yüzde birlik bir grup, programın katkısını güvenilir biçimde göstermeye yetmiyor; ölçüm yapılmış gibi görünse de sonuç belirsiz kalıyor.

Üçüncüsü, bekletme grubunun başka kanallardan aynı mesajı alması. CRM iletişiminden çıkarılan kişiler, aynı teklifi yeniden pazarlama reklamlarında görüyor; ölçülen fark gerçek katkıdan küçük çıkıyor.

Dördüncüsü, sonuçların yalnızca sipariş sayısıyla okunması. Program alan grup biraz daha fazla sipariş veriyor ama daha fazla indirim de kullanıyor; kişi başına katkı hesabında fark daralabiliyor.

Beşincisi, grubun süresiz bırakılması. Ölçüm tamamlandı ama kimse grubu programa geri almayı hatırlamadı; bu kişiler aylarca hiçbir pazarlama mesajı almıyor.

Altıncısı, aynı kişilerin her ölçümde bekletilmesi. Hep aynı grup dışarıda kalınca bu kişilerin ilişkisi zayıflıyor; her dönemde grubu yenilemek daha adil ve daha sağlıklı.

Yedincisi, sonucun platform raporuyla karşılaştırılmaması. Bekletme testi, e-posta raporunun gösterdiği gelirin yalnızca bir kısmının gerçekten ek gelir olduğunu gösteriyor; bu oran bütçe ve ekip kararlarında kullanılmalı.

Sekizincisi, reklamlardaki holdout test mantığıyla bağ kurulmaması. Reklam ve CRM ayrı ayrı ölçülüyor; iki ölçüm aynı dönemde yapılabilse, kanalların birbirinin satışını ne kadar paylaştığı da görülebilir.

Dokuzuncusu, kısa sürede uzun vadeli etki beklenmesi. CRM'nin etkisinin bir kısmı markayı hatırda tutmakla ilgili ve birkaç haftada tam görünmüyor; program düzeyinde bir çeyreklik ölçüm daha anlamlı.

Onuncusu, bekletme grubunun abone kazanımını etkilemesi. Yeni kaydolan kişiler karşılama akışından da mahrum kalırsa ilk izlenim bozuluyor; karşılama dizisi çoğu zaman ayrı ve daha kısa bir ölçümle değerlendiriliyor.

On birincisi, grup ayrımının gönderim araçları arasında tutarsız olması. E-posta aracı kişiyi dışarıda tutuyor ama SMS aracı bu listeyi bilmiyor; bekletme yalnızca kağıt üzerinde kalıyor.

On ikincisi, sonucun bir kez ölçülüp unutulması. Liste, teklifler ve müşteri davranışı değiştikçe programın katkısı da değişiyor; yılda bir iki kez tekrarlanan ölçüm bu değişimi takip ediyor.

Neyi göstermez?

Bekletme grubu, katkının hangi mesajdan geldiğini göstermez. Programın toplam etkisini ölçer; parça parça iyileştirme için A/B testleri gerekir.

Sıkça sorulan sorular

Kontrol grubundan farkı ne?

Kontrol grubu eski versiyonu alabilir; bekletme grubu ölçülen iletişimi tamamen almaz.

Grup ne kadar büyük olmalı?

Genellikle yüzde 5 ile 10 arası; küçük listelerde daha büyük oran gerekebilir.

İşlemsel mesajlar da kesilir mi?

Hayır; sipariş, kargo ve hesap bildirimleri her zaman gönderilmelidir.

Bu kavramın bütün resim içindeki yerini Retention Pazarlama Rehberi içinde ayrıntılı anlattım.

Ölçüm bitince bekletme grubunu programa geri almayı unutmayın; aksi halde bu kişiler aylarca sessizlikte kalır.
Dönüşüm Takibi ve Ölçümleme Kurulumu

GA4, GTM, Meta Pixel, CAPI, Google Ads dönüşüm, TikTok Pixel ve event doğrulama ile sağlam ölçümleme altyapısı.

Hizmeti İncele
Adem Demir
Yazar

Adem Demir

10+ yıldır e-ticaret markalarının performans pazarlamasını yönetiyorum. Sözlükteki her maddeyi bu sahadaki deneyimimle yazıyor ve düzenli olarak güncelliyorum.

Ücretsiz Ön Görüşme

Reklam bütçeniz harcanıyor, kar nerede?

E-ticaret kurulumundan karlı ölçeklemeye — hesabınızı denetleyip nerede bütçe kaybettiğinizi netçe gösteriyorum. 30 dakikalık ön görüşme ücretsiz.

Ücretsiz Ön Görüşme Planla 10+ yıl deneyim · Satış baskısı yok, net teşhis var