Kreatif Test Sistemi

Bir kreatif testin neyi sınadığını ve sonucu hangi kurala göre değerlendireceğimizi baştan bilmemiz gerekiyor.

Yalnızca görseli değiştirip iki reklamı yan yana çalıştırmak, birinin neden daha iyi sonuç verdiğini açıklamıyor. Bu yüzden her teste yazılı bir hipotezle başlıyor, incelemek istediğimiz değişkeni ayrı tutan bir hücre kuruyoruz. Sonucu da hangi reklamın daha çok harcadığına bakarak değil, yayından önce belirlediğimiz kanıt eşiğine göre değerlendiriyoruz. Elinizde kazanan, kaybeden ya da belirsiz kalan her sonucun kayda geçtiği ve bir sonraki somut brief'i beslediği bir kreatif test düzeni kalıyor. Zaten kreatif test yürüten ama sonuçları düzenli yazmayan, adil karşılaştırmayan ya da bir sonraki teste dönüştürmeyen sosyal reklam hesapları için uygun.

Hipotezlerden, varyantlardan ve kanıt eşiklerinden oluşan bir test matrisini canlı reklam performansıyla karşılaştıran kreatif stratejisti

Birlikte çalıştığımız 500'den fazla markadan birkaçı

Tüm referansları gör
  • DenizBank
  • Yves Rocher
  • Yemeksepeti
  • Milliyet
  • Silverline
  • Cyberpark
  • Amazon
  • BMW
  • Shell
  • Hyundai
  • PepsiCo
  • Red Bull
  • MediaMarkt
  • Decathlon
  • Trendyol
  • Hepsiburada
  • Sahibinden.com
  • Bayer
  • Sanofi
  • EY
  • KPMG
  • Acıbadem Sağlık Grubu
  • Abdi İbrahim
  • Domino’s

Çalışma nasıl yürüyor

Hipotezi altı adımda test ediyor ve sonucu sıradaki brief'e taşıyoruz

AI varyant yönleri için taslak hazırlıyor ve yorgunluk sinyallerini işaretliyor. Kreatifi onaylamıyor, kazananı belirlemiyor ya da testin ne zaman bittiğine karar vermiyor.

Çalışma ilkelerimiz

  • Her varyant bir sezgiden değil, yazılı bir hipotezden başlıyor
  • Bir test hücresi tek bir değişkeni yalıtıyor, yoksa ona test demiyoruz
  • Kanıt eşiğini kazanan belli olmadan, yayından önce belirliyoruz
  • Varyant seçeneklerinin taslağını AI çıkarabiliyor, yayın kararını insan veriyor

  1. Varyanttan önce hipotezi yazıyoruz

    Herhangi bir kreatif kurulmadan önce neye ve neden inandığımızı yazıyoruz. Belirli bir kanca, format ya da kanıt noktası seçiyoruz. Böylece testin doğrulayacağı ya da çürüteceği somut bir iddia oluyor. Hangi hipotezlerin kurulacağını kreatif ekibimiz ve stratejistimiz birlikte onaylıyor.

    Test edilen kancayı, formatı ya da kanıt noktasını ve arkasındaki gerekçeyi yazan hipotez.

  2. Değişkeni yalıtan bir hücre kuruyoruz

    Testi, yalnızca incelediğimiz değişken farklı olacak biçimde kuruyoruz. Yerleşim, kitle ve bütçe mantığı aynı kalıyor. Aynı anda üç değişkeni birden değiştirmiyoruz. Hücre tasarımını, kurulumdan önce stratejistimiz onaylıyor.

    Yerleşim, kitle ve bütçe mantığının varyantlar arasında sabit tutulduğu test hücresi.

  3. Kanıt eşiğini yayından önce belirliyoruz

    Örneklem büyüklüğünü, süreyi ve güven düzeyini erken sonuçları görmeden önce belirliyoruz. Böylece gerçek sonuç tanımı, ilk sayılara göre sonradan değişmiyor. Kanıt eşiğini stratejistimizle birlikte siz onaylıyorsunuz.

    Hiçbir rakam gelmeden önce kaydedilmiş örneklem büyüklüğü, süre ve güven düzeyi.

  4. Kreatifi üretip kontrolden geçiriyoruz

    Onaylanan varyantları marka ve platform politikası içinde kuruyor, yayından önce görsel haklarını ve iddiaları kontrol ediyoruz. Her varyantı yayından önce sizin tarafınızdaki marka ve uyum sorumluları onaylıyor.

    Marka kuralları, platform politikası, haklar ve iddialar açısından kontrolden geçmiş onaylı varyantlar.

  5. Çalıştırıp sonuçla yorgunluğu birlikte izliyoruz

    Testin anlaştığımız eşiğe ulaşmasını bekliyoruz. Ayrıca sıklığı ve etkileşim düşüşünü izliyoruz, böylece hâlâ çalışan bir test yayın sırasında fark edilmeden yorulmuyor. Yorulan bir varyantı tazelemeye, duraklatmaya ya da bitirmeye kreatif ekibimiz karar veriyor.

    Frekans ve etkileşim düşüşünün test sonucundan ayrı izlendiği çalışma kaydı.

  6. Sonucu karara bağlayıp bir sonraki brief'i yazıyoruz

    Testi üçüncü adımda belirlediğimiz kanıt eşiğine göre kazandı, kaybetti ya da belirsiz diye değerlendiriyoruz. Sonrasında çıkan dersi bir sonraki tur için somut bir hipoteze çeviriyoruz. Kararı ve bir sonraki brief'i stratejistimizle kreatif ekibimiz birlikte onaylıyor.

    Kanıt eşiğine göre verilmiş karar ve bu kararın doğurduğu bir sonraki hipotez.

Ekibinize ne teslim ediliyor

Her testten çıkan dersi saklayan bir matris

Daha önce hangi kancaların test edildiğini ve sonucun neye yol açtığını matriste görebiliyorsunuz. Ekibin bunu hatırlamasına gerek kalmıyor.

  • Kreatif test matrisi

    Her testin hipotezi, hücre tasarımı, kanıt eşiği ve sonucu tek yerde. Hiçbir şey kazara yeniden test edilmiyor.

  • Yorgunluk takip kaydı

    Aktif her kreatif için sıklık ve etkileşim eğilimi, tazelemeyi tetikleyen sınırla birlikte.

  • Sonuç ve güven kaydı

    Her testin sonunda neyi kanıtladığı, hangi güven düzeyinde kanıtladığı ve neyi yanıtlamadığı.

  • Sıradaki brief listesi

    Son turun kanıtına göre sıralanmış, kurulmaya hazır hipotezlerin güncel listesi.

Çalışma başlamadan önce

Bu çalışmanın doğru adım olduğu durumlar

İki reklamdan biri daha çok tıklama aldı, ama bunun nedenini hâlâ bilmiyoruz. Kreatif test adı altında çoğu zaman birkaç varyant yayına alınıyor ve birkaç gün sonra en düşük maliyeti bildiren reklam seçiliyor. Yazılı bir hipotez, ayrı tutulmuş bir değişken ve önceden belirlenmiş kanıt eşiği yoksa sonuçtan ne öğrendiğimizi söyleyemeyiz. Bir sonraki ay ekip aynı soruyla yeniden başlıyor.

Şu durumlarda iyi bir seçim

  • Kreatifler düzenli yenileniyor, ama hipotezler, hücre tasarımları ve sonuçlar hesap içinde dağınık kaldığı için bir sonraki tur hangi fikrin daha önce sınandığını bilmeden başlıyor.
  • Her test hücresi yayından önce belirlenen kanıt eşiğine ulaşacak kadar harcama alıyor, ama ilk iyi rakam yine de erken kazanan ilan ediliyor.
  • Test sonucu kayda geçiyor, ancak onaylanmış bir sonraki brief'e dönüşmediği için kreatif ekip aynı sorularla yeni varyantlar hazırlıyor.
  • Aynı reklam setinde, arkasında hiçbir hipotez olmayan birden fazla kreatif varyant çalışıyor.
  • Yeterli kanıt birikmeden, bir iki gün sonra bir test kazandı diye ilan ediliyor.
  • Sıklık ve düşen etkileşim yorgunluğu işaret ettikten çok sonra bile aynı kreatif çalışmaya devam ediyor.
  • Bir test sonucu hiçbir zaman belirli bir sonraki brief'e dönüşmüyor. Test bitiyor, bir sonraki parti sıfırdan başlıyor.

Şu durumlarda başka bir çalışma daha doğru

  • Bütçe iki yalıtılmış varyanta anlamlı örneklem vermiyor, bu yüzden ilk maliyet farkı kanıt gibi okunuyor ve hücreler adil karşılaştırılamıyor.
  • Kreatif değişiklikleri yazılı bir hipotez taşımıyor, bu yüzden düşük maliyetin neden oluştuğu ve sıradaki brief'te neyin kullanılacağı açıklanamıyor.
  • Sonucu sahiplenip sıradaki brief'e çevirecek bir sorumlu yok, dolayısıyla her kreatif turu önceki turun öğrendiğini taşımadan başlıyor.

Her kanalın kendi sorumlusu var

Zeo'da Ücretli Arama, Sosyal Medya Reklamları, CRO ve Programatik alanlarının her birini adı belli bir sorumlu yürütüyor. Aşağıdaki danışmanlar bu sayfanın konu aldığı kanala göre eşleşiyor, böylece gerçekte kiminle çalışacağınızı görebilirsiniz.

Kullandığımız araçlar

Bu işin arkasındaki araçlar

  • Smartly.io

    testteki izole varyantı her platform için tek üretimden hazırlıyor

  • Madgicx

    sonuç belirlendikten sonra da creative yorgunluğunu izlemeyi sürdürüyor

Mevcut test düzeninizi inceleyelim

Kreatif kararlarının hangi kanıta dayandığını netleştirelim

Mevcut kreatif rotasyonunuza bakabilir, hipotez ve kanıt eşiğinin eksik kaldığı yerleri bulabilir, yorgunluğun şu anda maliyeti nasıl etkilediğini gösterebiliriz.
Test düzenini inceleyelim

En sık duyduğumuz sorular

Bunun Ads Manager'da A/B testi çalıştırmaktan farkı ne?

Platformun A/B testi aracı tek bir girdi. Buradaki yöntem ise onun etrafındaki düzen: hipotez, yalıtılmış hücre tasarımı, yayından önce belirlenen kanıt eşiği ve bir test teknik olarak bittikten sonra da çalışmaya devam eden bir yorgunluk kontrolü.

Kazananı ilan etmek için yeterli kanıt ne demek?

Bu, hacme ve sonucun ne kadar sınırda olduğuna bağlı. Yeterli tanımının erken sayıları gördükten sonra değişmemesi için örneklem büyüklüğünü ve güven düzeyini yayından önce belirliyoruz.

AI bir testte hangi kreatifin kazandığına karar verebilir mi?

Veremiyor. AI hipotezlerin taslağını çıkarabiliyor, karışık hücre tasarımlarını işaretleyebiliyor, yorgunluk eğilimlerini yakalayabiliyor. Her sonucu ise stratejistimizle kreatif ekibimiz karara bağlıyor ve her yeni brief'i onlar onaylıyor.

Bir test sonuçsuz çıkarsa ne oluyor?

Sonuçsuz bir test de gerçek ve işe yarar bir sonuç. Genelde değişkenin hipotezin varsaydığı kadar önemli olmadığını gösteriyor. Bunu da yazıya döküyoruz; böylece hesap aynı şeyi üç ay sonra yeniden test etmiyor.