Ana içeriğe geç

SMS kampanyalarında A/B testinin tasarlanması ve sonuçların doğru yorumlanması

Çözümün özeti İki SMS metnini rastgele iki gruba göndermek tek başına güvenilir deney oluşturmaz. Segment dağılımı, zamanlama, maliyet, izin uygunluğu ve başarının neyle ölçüleceği test başlamadan belirlenmelidir. Mesaj uzunluğu ve bağlantı biçimi değişirse farkın hangi etkenden kaynaklandığı da analiz edilmelidir.

Problemin kapsamı ve karar noktaları Bu rehber, metin, teklif, gönderim saati, ölçüm planı ve karar kapsamında operasyonel çözüm tasarımına odaklanır. Mesaj kampanyasının çıktısı yalnız gönderim adedi veya tıklama değildir; doğru hedef kitle seçimi, izin/ret uygunluğu, müşteri deneyimi ve gerçek iş sonucu birlikte ölçülmelidir. İşlemsel bildirimlerle ticari mesajlar aynı amaç altında birleştirilmemelidir. Kampanya verisinin hangi rapordan geldiği, örneklem büyüklüğü ve dönüşümün uygulama tarafından mı yoksa bağlantı servisinden mi ölçüldüğü açıklanmalıdır. Pilot ölçekte başlayan doğrulamalar canlı yayındaki hatalı alıcı maliyetini azaltabilir.

Çalışmaya başlamadan önce

  • Tek bir ana hipotez ve birincil başarı metriği seçin
  • İzinli hedef kitlenin örneklem ve segment dengesini kontrol edin
  • Gönderim saatlerini ve kampanya koşullarını eşitleyin
  • Test süresini ve değerlendirme yöntemini önceden yazın

Adım adım uygulama planı

AşamaYapılacak çalışma ve kontrol gerekçesi
1. adımTestte yalnız tek temel değişkeni, örneğin çağrı ifadesini, iki varyantta farklılaştırın Tetikleyici, hedef kitle ve başarı metriği baştan kararlaştırılmazsa kampanya sonrası karşılaştırma yanıltıcı hale gelebilir.
2. adımGrupları müşteri özellikleri ve son ileti sıklığı bakımından dengeli ayırın Ticari ileti uygunluğu ile müşteri verisinin doğruluğu aynı kontrol değildir; gönderim öncesinde ikisi ayrı ele alınmalıdır.
3. adımGönderimden hemen önce İYS ticari ileti uygunluğunu kontrol edin Metin, tarih ve bağlantı hatalarında kişisel veri ifşası veya yanlış yönlendirme yaşanmaması negatif testle doğrulanmalıdır.
4. adımKısa linklere varyant kimliği atayıp tıklama ile gerçek dönüşümü ayrı ölçün Onay ve istisna sorumluları belli değilse son dakika değişikliği beklenmedik toplu gönderime dönüşebilir.
5. adımİletilmeyen mesaj ve teknik hata payını sonuç değerlendirmesine dahil edin Küçük pilotta gerçek teslimat, bağlantı ve dönüşüm olayları farklı kaynaklardan karşılaştırılarak ölçüm doğrulanmalıdır.
6. adımSonuçlar küçük veya belirsiz olduğunda kazanan ilan etmek yerine yeni test ihtiyacını yazın Rapor, dönüşüm yanında izin değişikliği, ret ve şikâyet etkilerini de kapsamalıdır; yalnız gönderim adedi başarı sayılmaz.

Örnek uygulama senaryosu Bir perakende markası “Yeni koleksiyon yayında” ile “Koleksiyonu keşfedin” çağrılarını karşılaştırıyor. İki metinde teklif, gönderim saati ve hedef kitle koşulları aynı tutuluyor. Varyant A daha fazla tıklama alıyor fakat sipariş farkı oluşmuyorsa gerçek hedef dönüşüm olarak tanımlandığı için yalnız tıklama üzerinden tüm kampanya değiştirilmez.

Canlıya alma ve olumsuz durum testleri

  • İzin/ret durumu bulunmayan test kişisinin ticari kampanya listesine otomatik eklenmediğini doğrulayın.
  • Boş kişiselleştirme alanında metnin anlaşılır kaldığını ve yanlış kişiye veri sızmadığını test edin.
  • Aynı kişinin birden fazla kampanya koşuluna girmesi hâlinde frekans sınırının çalıştığını kontrol edin.
  • Test kampanyası teslimat, bağlantı ve gerçek iş dönüşümünü ayrı olaylar olarak raporlayabiliyor mu doğrulayın.

İzleme ve kabul göstergeleri

GöstergeNasıl değerlendirilmeli?
Varyant bazında teslim edilen mesaja göre tıklamaBaşlangıç ölçümüyle karşılaştırın; hedefi iş sahibi önceden belirlesin.
Birincil iş dönüşümü ve güven aralığıKırılımları kanal, segment veya işlemin türüne göre inceleyin.
Mesaj uzunluğu ve birim gönderim maliyetiAni değişimi kaynak veriye ve olaya bağlayarak doğrulayın.
Varyant bazında ret ve şikâyet oranıSonucun yalnız teknik değil iş süreci açısından da kabulünü arayın.

Sık yapılan hatalar

  • Aynı anda hem teklif hem hedef kitle hem saat değiştirmek
  • Teslim edilemeyen numaraları örneklemden gizleyerek oranı iyileştirmek
  • Çok küçük farkı kesin başarı diye duyurmak

Sorumluluk paylaşımı

  • Pazarlama: hedef, segment ve yaratıcı içerik kararlarını verir.
  • Veri/BT: tetikleme, kayıt kalitesi ve ölçümü kurar.
  • Uyum ve müşteri hizmetleri: izin, ret ve şikâyet sinyallerini izler.

Mobildev çözümleriyle bağlantı Mobildev SMS Marketing Suite segmentasyon, şablon, gönderim ve raporlama süreçlerinde; Infomize bağlantı etkileşimlerinin ölçülmesinde kullanılabilir. Rastgele atama, istatistiksel değerlendirme ve test tasarımı kuruma ait analitik süreçlerle yürütülmelidir.

Sürdürülebilir işletim ve güncelleme Kampanya sonrası değerlendirme toplantısında iyi sonuç veren varyantın yanı sıra artan ret, şikâyet ve iletişim sıklığı da paylaşılmalıdır. Çıkan karar kampanya şablonuna, hedef kitle kuralına veya veri kaynağına yansıtılmalı; bir sonraki yayında önceki hatanın tekrar etmediği kanıtlanmalıdır. Test amaçlı kullanılan alıcılar, canlı veri ve çalışma saatleri net ayrılmalıdır. Ticari ileti uygunluğu değerlendirmesi her yeni kampanyada yenilenmelidir.

Kontrol ve karar kaydı Uygulamayı tamamlandı kabul etmeden önce 'SMS kampanyalarında A/B testinin tasarlanması ve sonuçların doğru yorumlanması' için belirlenen iş sonucu, en az bir başarısızlık senaryosu ve sorumlu ekibin onayı birlikte kaydedilmelidir. Özellikle varyant bazında teslim edilen mesaja göre tıklama ve varyant bazında ret ve şikâyet oranı göstergelerinin ilk dönem eğilimi izlenmelidir. Hukuki veya ürün bazlı yetki gerektiren unsurlar sözleşme, güncel dokümantasyon ve ilgili uzman değerlendirmesiyle netleştirilmeden otomatik uyum vaadi verilmemelidir.

Ürün ve teknik kaynaklar SMS Marketing Suite – resmî kaynak

Bu doküman size yardımcı oldu mu?

Değerlendirmeniz, dokümanı geliştirmemize yardımcı olur.

Değerlendirme yapmak için giriş yapmalısınız.

Destek soruları ve yorumlar

Bu dokümanla ilgili soru sorabilir veya deneyiminizi paylaşabilirsiniz.