Kreatif Test Sistemi

Bir kreatif testin neyi sınadığını ve sonucu hangi kurala göre değerlendireceğimizi baştan bilmemiz gerekiyor.

Yalnızca görseli değiştirip iki reklamı yan yana çalıştırmak, birinin neden daha iyi sonuç verdiğini açıklamıyor. Bu yüzden her teste yazılı bir hipotezle başlıyor, incelemek istediğimiz değişkeni ayrı tutan bir hücre kuruyoruz. Sonucu da hangi reklamın daha çok harcadığına bakarak değil, yayından önce belirlediğimiz kanıt eşiğine göre değerlendiriyoruz. Zaten kreatif test yürüten ama sonuçları düzenli yazmayan, adil karşılaştırmayan ya da bir sonraki teste dönüştürmeyen sosyal reklam hesapları için uygun.

Kazanan, kaybeden ya da belirsiz kalan her sonucun kayda geçtiği ve bir sonraki somut brief'i beslediği bir kreatif test düzeni.

Hipotezlerden, varyantlardan ve kanıt eşiklerinden oluşan bir test matrisini canlı reklam performansıyla karşılaştıran kreatif stratejisti

Birlikte çalıştığımız 500'den fazla markadan birkaçı

Tüm referansları gör
  • DenizBank
  • Yves Rocher
  • Yemeksepeti
  • Milliyet
  • Silverline
  • Cyberpark

Çalışma nasıl yürüyor

Hipotezi altı adımda test ediyor ve sonucu sıradaki brief'e taşıyoruz

AI varyant yönleri için taslak hazırlıyor ve yorgunluk sinyallerini işaretliyor. Kreatifi onaylamıyor, kazananı belirlemiyor ya da testin ne zaman bittiğine karar vermiyor.

Çalışma ilkelerimiz

  • Her varyant bir sezgiden değil, yazılı bir hipotezden başlıyor
  • Bir test hücresi tek bir değişkeni yalıtıyor, yoksa ona test demiyoruz
  • Kanıt eşiğini kazanan belli olmadan, yayından önce belirliyoruz
  • Varyant seçeneklerinin taslağını AI çıkarabiliyor, yayın kararını insan veriyor

  1. Varyanttan önce hipotezi yazıyoruz

    Herhangi bir kreatif kurulmadan önce neye ve neden inandığımızı yazıyoruz. Belirli bir kanca, format ya da kanıt noktası seçiyoruz. Böylece testin doğrulayacağı ya da çürüteceği somut bir iddia oluyor.

    Test edilen kancayı, formatı ya da kanıt noktasını ve arkasındaki gerekçeyi yazan hipotez.

    Yapay zeka desteği
    Geçmiş sonuçları ve araştırmayı, olası etkiye göre sıralanmış bir taslak hipotez listesinde topluyor.
    İnsan onayı
    Hangi hipotezlerin kurulacağını kreatif ekibimiz ve stratejistimiz birlikte onaylıyor.
    Sorumlular
    Kreatif ekibimiz + stratejistimiz

  2. Değişkeni yalıtan bir hücre kuruyoruz

    Testi, yalnızca incelediğimiz değişken farklı olacak biçimde kuruyoruz. Yerleşim, kitle ve bütçe mantığı aynı kalıyor. Aynı anda üç değişkeni birden değiştirmiyoruz.

    Yerleşim, kitle ve bütçe mantığının varyantlar arasında sabit tutulduğu test hücresi.

    Yapay zeka desteği
    Önerilen test hücresini yalıtım gereksinimine göre kontrol ediyor, karışık kurulumları işaretliyor.
    İnsan onayı
    Hücre tasarımını, kurulumdan önce stratejistimiz onaylıyor.
    Sorumlular
    Stratejistimiz + medya uzmanımız

  3. Kanıt eşiğini yayından önce belirliyoruz

    Örneklem büyüklüğünü, süreyi ve güven düzeyini erken sonuçları görmeden önce belirliyoruz. Böylece gerçek sonuç tanımı, ilk sayılara göre sonradan değişmiyor.

    Hiçbir rakam gelmeden önce kaydedilmiş örneklem büyüklüğü, süre ve güven düzeyi.

    Yapay zeka desteği
    Geçmiş hacimden kaba bir örneklem büyüklüğü tahmini çıkarıyor, gerçekçi olmayan bir takvimi işaretliyor.
    İnsan onayı
    Kanıt eşiğini stratejistimizle birlikte siz onaylıyorsunuz.
    Sorumlular
    Stratejistimiz + sizin tarafınızdaki karar verici

  4. Kreatifi üretip kontrolden geçiriyoruz

    Onaylanan varyantları marka ve platform politikası içinde kuruyor, yayından önce görsel haklarını ve iddiaları kontrol ediyoruz.

    Marka kuralları, platform politikası, haklar ve iddialar açısından kontrolden geçmiş onaylı varyantlar.

    Yapay zeka desteği
    İncelemeye hazır varyant metninin taslağını hazırlıyor, brief'e göre politika ve iddia risklerini işaretliyor.
    İnsan onayı
    Her varyantı yayından önce sizin tarafınızdaki marka ve uyum sorumluları onaylıyor.
    Sorumlular
    Sizin tarafınızdaki marka sorumlusu + uyum sorumlusu

  5. Çalıştırıp sonuçla yorgunluğu birlikte izliyoruz

    Testin anlaştığımız eşiğe ulaşmasını bekliyoruz. Ayrıca sıklığı ve etkileşim düşüşünü izliyoruz, böylece hâlâ çalışan bir test yayın sırasında fark edilmeden yorulmuyor.

    Frekans ve etkileşim düşüşünün test sonucundan ayrı izlendiği çalışma kaydı.

    Yapay zeka desteği
    Yükselen sıklığı ya da düşen etkileşimi yorgunluk eşiğine göre işaretliyor.
    İnsan onayı
    Yorulan bir varyantı tazelemeye, duraklatmaya ya da bitirmeye kreatif ekibimiz karar veriyor.
    Sorumlular
    Kreatif ekibimiz + medya uzmanımız

  6. Sonucu karara bağlayıp bir sonraki brief'i yazıyoruz

    Testi üçüncü adımda belirlediğimiz kanıt eşiğine göre kazandı, kaybetti ya da belirsiz diye değerlendiriyoruz. Sonrasında çıkan dersi bir sonraki tur için somut bir hipoteze çeviriyoruz.

    Kanıt eşiğine göre verilmiş karar ve bu kararın doğurduğu bir sonraki hipotez.

    Yapay zeka desteği
    Test verisinden sonuç özetini ve aday bir sonraki brief taslağını hazırlıyor.
    İnsan onayı
    Kararı ve bir sonraki brief'i stratejistimizle kreatif ekibimiz birlikte onaylıyor.
    Sorumlular
    Stratejistimiz + kreatif ekibimiz

Ekibinize ne teslim ediliyor

Her testten çıkan dersi saklayan bir matris

Daha önce hangi kancaların test edildiğini ve sonucun neye yol açtığını matriste görebiliyorsunuz. Ekibin bunu hatırlamasına gerek kalmıyor.

  • Kreatif test matrisi

    Her testin hipotezi, hücre tasarımı, kanıt eşiği ve sonucu tek yerde. Hiçbir şey kazara yeniden test edilmiyor.

    Kabul koşulu

    Her testin hipotezi, hücre tasarımı, kanıt eşiği ve sonucu tek bir yerde duruyor; böylece hiçbir varyant yanlışlıkla ikinci kez test edilmiyor.

    Ritim: Her kreatif turunda

  • Yorgunluk takip kaydı

    Aktif her kreatif için sıklık ve etkileşim eğilimi, tazelemeyi tetikleyen sınırla birlikte.

    Kabul koşulu

    Her aktif kreatif kendi frekans ve etkileşim eğilimini ve yenilemeyi tetikleyen eşiği taşıyor.

    Ritim: Haftalık incelenir

  • Sonuç ve güven kaydı

    Her testin sonunda neyi kanıtladığı, hangi güven düzeyinde kanıtladığı ve neyi yanıtlamadığı.

    Kabul koşulu

    Her kayıt testin neyi, hangi güven düzeyinde kanıtladığını ve neyi yanıtlamadığını yazıyor.

    Ritim: Her test kapanışında

  • Sıradaki brief listesi

    Son turun kanıtına göre sıralanmış, kurulmaya hazır hipotezlerin güncel listesi.

    Kabul koşulu

    Sıra, en son gelen fikre göre değil, önceki turun kanıtının desteklediğine göre kuruluyor.

    Ritim: Test kararından sonra

Çalışma başlamadan önce

Bu çalışmanın doğru adım olduğu durumlar

İki reklamdan biri daha çok tıklama aldı, ama bunun nedenini hâlâ bilmiyoruz. Kreatif test adı altında çoğu zaman birkaç varyant yayına alınıyor ve birkaç gün sonra en düşük maliyeti bildiren reklam seçiliyor. Yazılı bir hipotez, ayrı tutulmuş bir değişken ve önceden belirlenmiş kanıt eşiği yoksa sonuçtan ne öğrendiğimizi söyleyemeyiz. Bir sonraki ay ekip aynı soruyla yeniden başlıyor.

Şu durumlarda iyi bir seçim

  • Kreatifler düzenli yenileniyor, ama hipotezler, hücre tasarımları ve sonuçlar hesap içinde dağınık kaldığı için bir sonraki tur hangi fikrin daha önce sınandığını bilmeden başlıyor.
  • Her test hücresi yayından önce belirlenen kanıt eşiğine ulaşacak kadar harcama alıyor, ama ilk iyi rakam yine de erken kazanan ilan ediliyor.
  • Test sonucu kayda geçiyor, ancak onaylanmış bir sonraki brief'e dönüşmediği için kreatif ekip aynı sorularla yeni varyantlar hazırlıyor.
  • Aynı reklam setinde, arkasında hiçbir hipotez olmayan birden fazla kreatif varyant çalışıyor.
  • Yeterli kanıt birikmeden, bir iki gün sonra bir test kazandı diye ilan ediliyor.
  • Sıklık ve düşen etkileşim yorgunluğu işaret ettikten çok sonra bile aynı kreatif çalışmaya devam ediyor.
  • Bir test sonucu hiçbir zaman belirli bir sonraki brief'e dönüşmüyor. Test bitiyor, bir sonraki parti sıfırdan başlıyor.

Şu durumlarda başka bir çalışma daha doğru

  • Bütçe iki yalıtılmış varyanta anlamlı örneklem vermiyor, bu yüzden ilk maliyet farkı kanıt gibi okunuyor ve hücreler adil karşılaştırılamıyor.
  • Kreatif değişiklikleri yazılı bir hipotez taşımıyor, bu yüzden düşük maliyetin neden oluştuğu ve sıradaki brief'te neyin kullanılacağı açıklanamıyor.
  • Sonucu sahiplenip sıradaki brief'e çevirecek bir sorumlu yok, dolayısıyla her kreatif turu önceki turun öğrendiğini taşımadan başlıyor.

Her kanalın kendi sorumlusu var

Zeo'da Ücretli Arama, Sosyal Medya Reklamları, CRO ve Programatik alanlarının her birini adı belli bir sorumlu yürütüyor. Aşağıdaki danışmanlar bu sayfanın konu aldığı kanala göre eşleşiyor, böylece gerçekte kiminle çalışacağınızı görebilirsiniz.

Kullandığımız araçlar

Bu işin arkasındaki araçlar

  • Smartly.io

    testteki izole varyantı her platform için tek üretimden hazırlıyor

  • Madgicx

    sonuç belirlendikten sonra da creative yorgunluğunu izlemeyi sürdürüyor

Mevcut test düzeninizi inceleyelim

Kreatif kararlarının hangi kanıta dayandığını netleştirelim

Mevcut kreatif rotasyonunuza bakabilir, hipotez ve kanıt eşiğinin eksik kaldığı yerleri bulabilir, yorgunluğun şu anda maliyeti nasıl etkilediğini gösterebiliriz.
Test düzenini inceleyelim

En sık duyduğumuz sorular

Bunun Ads Manager'da A/B testi çalıştırmaktan farkı ne?

Platformun A/B testi aracı tek bir girdi. Buradaki yöntem ise onun etrafındaki düzen: hipotez, yalıtılmış hücre tasarımı, yayından önce belirlenen kanıt eşiği ve bir test teknik olarak bittikten sonra da çalışmaya devam eden bir yorgunluk kontrolü.

Kazananı ilan etmek için yeterli kanıt ne demek?

Bu, hacme ve sonucun ne kadar sınırda olduğuna bağlı. Yeterli tanımının erken sayıları gördükten sonra değişmemesi için örneklem büyüklüğünü ve güven düzeyini yayından önce belirliyoruz.

AI bir testte hangi kreatifin kazandığına karar verebilir mi?

Veremiyor. AI hipotezlerin taslağını çıkarabiliyor, karışık hücre tasarımlarını işaretleyebiliyor, yorgunluk eğilimlerini yakalayabiliyor. Her sonucu ise stratejistimizle kreatif ekibimiz karara bağlıyor ve her yeni brief'i onlar onaylıyor.

Bir test sonuçsuz çıkarsa ne oluyor?

Sonuçsuz bir test de gerçek ve işe yarar bir sonuç. Genelde değişkenin hipotezin varsaydığı kadar önemli olmadığını gösteriyor. Bunu da yazıya döküyoruz; böylece hesap aynı şeyi üç ay sonra yeniden test etmiyor.