A/B Testi Oluşturma

A/B testi ile, varyantların performanslarını istatiksel olarak kıyaslayabilirsiniz.

A/B testini, farklı target aksiyonlarının birbirlerine göre performanslarını karşılaştırma amacıyla kullanabilirsiniz. Anasayfa, üyelik sayfası, satış sayfası, ya da landing page için farklı A/B testleri uygulayabilir ve hedeflediğiniz eylemin (üye olma, satın alma, tıklama..) değişimini takip edip gerekli düzenlemeleri yapabilirsiniz. 


Target ile iki tip A/B testi yapılabilir:

  1. Classic: Bu testte 1’den fazla farklı JavaScript A/B testine sokulur. Sayfa üzerinde bir elemanın rengi değiştirilecek veya bir metin değiştirilecek ise bir başka deyişle istenen değişiklik Targeting Action ile yapılamayacak bir şey ise Classic kullanılır.

  2. Targeting Actions: Önceden oluşturulmuş iki veya daha fazla Targeting Action test edilmek istendiğinde seçilir.

Target Kuralları atında oluşturmus olduğunuz kuralları ekleyerek, testin sadece belirlediğiniz bir hedef kitlesine uygulanmasını sağlayabilirsiniz.




Yeni Bir A/B Testing Oluşturma 

A/B Testing oluşturma sayfasına; Target > A/B Testing > New A/B Testing seçerek ulaşabilirsiniz.




1. Test Tanımlama 

  1. Oluşturmakta olduğunuz A/B Testi için bir isim (Name) girin.

  2. Status alanından durumunu Aktif veya Pasif olarak belirleyin.

  3. Hangi tip (Test Type) A/B Testi uygulamak istediğinizi seçin:

    1. ClassicBu testte 1’den fazla farklı JavaScript A/B testine sokulur. Sayfa üzerinde bir elemanın rengi değiştirilecek ve ya bir metin değiştirilecek ise bir başka deyişle istenen değişiklik Targeting Action ile yapılamayacak bir şey ise Classic kullanılır.
    2. Targeting Action: Önceden oluşturulmuş iki veya daha fazla Targeting Action test edilmek istendiğinde seçilir.

      Targeting Action oluşturuken AB Test olarak kullanılması için Targeting Action oluştururken "For AB Testing" seçeneğinin açık olması gerekir.

  4. Hangi sayfalara gelen ziyaretçilerin teste dahil edileceğini Pages to be applied alanından belirleyebilirsiniz. '*'(wildcard) konulduğu durumlarda her sayfada test uygulanır.

  5. AB testlerinde başarı kriteri olarak Conversion Event (Dönüşüm Eylemi) bir Event Type verilmelidir. Orneğin; Product Purchase (Ürün Satın Alma). Bu durumda farklı varyantlar, varyanta dahil kişilerin ne kadarının ürün satın aldığına (Product Purchase) göre kıyaslanacaktır.

    Bir kişi rastgele olarak Varyantlardan birine dahil edilir ve test tamamlanana kadar o varyantta kalır. Test sırasında tanımlanan Conversion Event’i gerçekleştirirse o varyantın Unique Conversions sayısı 1 arttırılır.


  6. A/B Testi için başlangıç tarihini, Start Date alanından ekleyebilirsiniz.


  7. Control Group, test yapılacak kitlenin % kaçının teste dahil edilmeyeceğini belirler. 



2. A/B Testine Varyant Ekleme 

Add new Variant butonuna tıklandıktan sonra, seçilen Test Tipine göre doldurulması gereken alanlar farklılık göstermektedir:

  • Classic Test Tipi için Varyant Ekleme:

    1. Variant Name alanına A/B testi için kullanılmak istenen varyant ismini ekleyin.
    2. Variant JavaScript Code alanına A/B testi uygulamak istenen varyanta ait JavaScript Kodunu girin.


  • Targeting Actions Test Tipi için Varyant Ekleme


    1. Variant Name alanına A/B testi için kullanılmak istenen varyant ismini ekleyin.
    2. Targeting Action alanından test etmek istediğiniz Targeting Action'ı seçin.

      Targeting Action oluşturuken A/B Test olarak kullanılması için Targeting Action oluştururken "For AB Testing" seçeneğinin açık olması gerekir.


3. Hedef Kitle Belirleme – Target Rules 

Target Kuralları altında önceden tanımladığınız kuralları seçerek oluşturduğunuz testin sadece belirlediğiniz kitleye uygunlanmasını sağlayabilirsiniz.


Eğer Target Rule seçilmez ise 'Pages to be applied' kriterine uyan herkes teste dahil edilir.



A/B Testinin Raporlanması 

Testin raporuna ulaşmak için Test listesindeki Testin satırında bulunan Actions butonundan Show Report seçilmelidir.



Actions butonunu kullanarak oluşturduğunuz A/B testi için Edit A/B Testing seçerek, A/B testini düzenleyebilir, Terminate seçerek sonlandırabilir ve Enable / Disable seçeneklerini kullanarak A/B Testinin durumunu aktif ve pasif olarak değiştirebilirsiniz.



Sonuçların Analizi 

  1. Unique Conversion – Visitors kolonunda 2 rakam görüntüleniyor. Bu rakamlardan küçük boyutta yazılan o ana kadar kaç kişinin ilgili varyanta dahil olduğunu (Visitors / Ziyaretçiler) büyük boyutta yazılan ise varyanta dahil olanlardan kaçının tanımlanan Conversion Event’ini (Dönüşüm Eylemini) gerçekleştiğini gösterir.

  2. Conversion Rate (Dönüşüm Oranı) 2. Kolondaki 2 rakamın oranıdır.

Varyanta dahil olan kullanıcı sayısı ve Conversion Event (Dönüşüm Eylemi) gerçekleştiren kişi sayısı analiz edilerek geldiği için 1-2 saat gecikme olabilir.



Test Nasıl Sonuçlanıyor? 

Test kendiliğinde hiç bir zaman sonuçlanmaz.  Eğer bütün varyantların yanında Statistical Significance değeri gösteriliyor ise varyantlar arasında istatiksel olarak anlamlı bir fark oluşmuş demektir, dolayısıyla test sonuçlanmıştır. Improvement (iyileştirme) olmak zorunda değil ancak en yüksek improvement değerine ulaşan test kazanmıştır.



Copyright 2020 Related Digital