Arama Deneyi Tasarımı ve Analizi

Yapısal değişiklikleri canlı kampanyaya uygulamadan önce kontrollü bir deneyde sınıyoruz.

Kampanya taslakları canlı kampanyanızın bir kopyasını çıkarıyor, böylece yapısal ya da stratejik bir değişikliği mevcut işleyişe dokunmadan kurabiliyorsunuz. Deney ise bu taslağı belirli bir süre boyunca orijinaliyle karşılaştırmak için trafiği ve bütçeyi bölüyor. Biz test edilecek tek değişikliği belirliyor, yayından önce bölünme ve karar kuralında anlaşıyor, sonucu ancak pencere gerçekten kapandığında okuyoruz. Karar kuralını onaylayacak belli bir kişisi olan ve testin her iki kolunu da aç bırakmadan bölecek kadar trafiği bulunan ekipler için uygun. Doğrudan yayınlanacak kadar düşük riskli bir değişiklik için gerekmiyor.

Hangi yapısal değişikliğin test edildiğini, trafik bölünmesinin tam olarak neyi gösterdiğini ve her birinin neden uygulandığını, uzatıldığını ya da bırakıldığını gösteren bir kayıt.

İzlenen bir deney panosunda orijinal kampanya ile taslak varyant arasında trafiği bölen bir stratejist

Birlikte çalıştığımız 500'den fazla markadan birkaçı

Tüm referansları gör
  • Hyundai
  • Decathlon
  • Enerjisa
  • Axa Sigorta
  • Otsimo
  • Doremusic
  • Odamax

Çalışma nasıl yürüyor

Deneyi değişken, süre ve karar kuralıyla birlikte kuruyoruz

Deney boyunca hesabın güncel durumuyla karşılaştırabileceğiniz bir kayıt tutuyoruz. AI durum değişikliklerini izliyor ve sonuç raporunun taslağını hazırlıyor. Canlı kampanyayı başlatma, uzatma ve değiştirme kararları insan onayı olmadan alınmıyor.

Çalışma ilkelerimiz

  • Değişikliği canlı kampanyaya dokunmadan önce bir taslakta deniyoruz
  • Bölünmeyi, süreyi ve karar kuralını yayından önce belirliyoruz
  • İyi göründüğü an değil, pencere kapanana kadar okumayı bekliyoruz
  • Sonuç kendi değişikliğine bağlanabilsin diye kampanya başına tek deney yürütüyoruz

  1. Değişikliği bir taslak olarak kuruyoruz

    Canlı kampanyanın bir kopyasını taslağa çıkarıyor ve test edilecek tek yapısal ya da stratejik değişikliği yapıyoruz. Böylece aynı anda başka hiçbir şey değişmiyor.

    Orijinali birebir yansıtan, yalnızca tek bir yapısal ya da stratejik değişiklik taşıyan taslak kampanya.

    Yapay zeka desteği
    Yazılı varsayımdan değişiklik tanımının taslağını hazırlıyor.
    İnsan onayı
    PPC ekibimiz, taslağın yalnızca hedeflenen değişkeni değiştirdiğini onaylıyor.
    Sorumlular
    PPC ekibimiz + strateji ekibimiz

  2. Bölünmeyi, süreyi ve karar kuralını belirliyoruz

    Deney başlamadan önce trafik ve bütçe bölünmesinde, sürede, koruma metriklerinde ve hangi sonucun neyi tetikleyeceğinde anlaşıyoruz.

    Bölünmeyi, süreyi, koruma metriklerini ve sonucu aksiyona bağlayan kuralı sabitleyen deney özeti.

    Yapay zeka desteği
    Önerilen bölünme ve süreyle deney özetinin taslağını hazırlıyor.
    İnsan onayı
    Karar kuralını yayından önce siz onaylıyorsunuz.
    Sorumlular
    PPC ekibimiz + sizin tarafınızdaki karar verici

  3. Taslağı deneye çevirip yayına alıyoruz

    Taslağın, üzerinde anlaştığımız pencere boyunca orijinal kampanyayla yan yana çalışacağı bölünmüş yayını başlatıyoruz.

    Anlaşılan pencere boyunca orijinal kampanyayla yarışan canlı bölünmüş çalışma.

    Yapay zeka desteği
    Deneyin onaylı bölünme ve süreyle başladığını teyit ediyor.
    İnsan onayı
    Yayına almayı PPC ekibimiz onaylıyor.
    Sorumlular
    PPC ekibimiz + medya uzmanımız

  4. Durumu izliyor, okumayı bozabilecekleri işaretliyoruz

    Süre boyunca deneyin durumunu izliyoruz. Mevsimsel bir kayma, bir politika değişikliği ya da açılış sayfasında yapılan bir düzenleme gibi okumayı kirletebilecek her şeyi işaretliyoruz.

    Okumayı bozabilecek her dış değişikliğin işaretlendiği durum kaydı.

    Yapay zeka desteği
    Deney durumunu izliyor, süre boyunca dışarıdan gelen her değişikliği işaretliyor.
    İnsan onayı
    Strateji ekibimiz işaretlenenleri haftalık olarak inceliyor.
    Sorumlular
    Strateji ekibimiz + PPC ekibimiz

  5. Sonucu karar kuralına göre okuyoruz

    Planlanan sürenin tamamını bekliyoruz. Sonrasında birincil metriği ve koruma metriklerini, sonradan uydurulan bir kurala göre değil, yayından önce anlaştığımız kurala göre karşılaştırıyoruz.

    Birincil metriği ve koruma metriklerini, tam süre dolduktan sonra önceden anlaşılmış kurala göre karşılaştıran rapor.

    Yapay zeka desteği
    Planlanan süre dolunca sonuç raporunun taslağını hazırlıyor.
    İnsan onayı
    PPC ekibimiz, harekete geçilmeden önce raporu onaylıyor.
    Sorumlular
    PPC ekibimiz + strateji ekibimiz

  6. Sonuca göre uyguluyor, uzatıyor ya da değişikliği bırakıyoruz

    Önceden belirlediğimiz karar kuralına göre taslağı canlı kampanyaya uyguluyor, deney süresini uzatıyor ya da değişiklikten vazgeçiyoruz. Hangi yolu seçtiysek gerekçesini kaydediyoruz.

    Alınan aksiyonu ve gerekçesini, kuraldan her sapma dahil, adıyla yazan karar kaydı.

    Yapay zeka desteği
    Onaylanan rapordan karar kaydının taslağını hazırlıyor.
    İnsan onayı
    Canlı kampanyadaki her değişikliği siz onaylıyorsunuz.
    Sorumlular
    PPC ekibimiz + sizin tarafınızdaki karar verici

Ekibinize ne teslim ediliyor

Yalnızca neyin yayınlandığının değil, tam olarak neyin test edildiğinin kaydı

Her deney için bir özet, bir durum kaydı ve bir sonuç raporu bırakıyoruz. Böylece bir karar sonradan hatırlanmaya çalışılmak yerine baştan kurulabiliyor.

  • Deney özeti

    Değişiklik, bölünme, süre ve karar kuralı. Hepsi deney hiç başlamadan önce üzerinde anlaşılmış oluyor.

    Kabul koşulu

    Değişiklik, bölünme, süre ve karar kuralı, deney yayına girmeden önce anlaşılıp kayda geçiyor.

    Ritim: Her deneyden önce

  • Taslak ve deney durum kaydı

    Süre boyunca yaşanan durum değişiklikleri ve sonucun okunuşunu etkileyebilecek her dış etken.

    Kabul koşulu

    Çalışma sırasındaki her durum değişikliği ve işaretlenen her dış etken kaydediliyor; böylece okuma hafızadan savunulmuyor.

    Ritim: Deney süresince

  • Koruma metrikleri notu

    Bir deneyi erken durdurabilecek ya da işaretleyebilecek metrikler ve her birinin izlendiği sınır.

    Kabul koşulu

    Her koruma metriği, hangi eşiğe karşı izlendiğini ve o eşik aşıldığında ne olacağını yazıyor.

    Ritim: Özette ve süre boyunca

  • Sonuç raporu ve karar kaydı

    Bölünmüş trafiğin tam olarak neyi gösterdiği, neye karar verildiği ve taslağı uygulama, uzatma ya da bırakma gerekçesi.

    Kabul koşulu

    Rapor önceden belirlenmiş kurala dayanıyor ve uygula, uzat ya da bırak kararı her durumda gerekçesini yazıyor.

    Ritim: Her deneyin kapanışında

Çalışma başlamadan önce

Bu çalışmanın doğru adım olduğu durumlar

Yapısal bir değişikliği doğrudan canlı kampanyaya uygulamak, temiz bir karşılaştırma şansını ortadan kaldırıyor. Google'ın kendi deney mekanizması, bir taslağı belirli bir süre boyunca orijinal kampanyayla yan yana çalıştırıyor. Trafiği ve bütçeyi bölüyor, böylece karara bağlanmadan önce karşılaştırabiliyorsunuz. Bu adımı atladığınızda ise yapısal bir değişiklik, beklenenin altında kalırsa geri dönecek bir yedeği olmadan yayına giriyor. Deney kuran ekipler bile çoğu zaman sonucu günler önce okuyor. Ya da Google bir kampanyada aynı anda tek deneye izin verirken ekip aynı kampanyada ikinci bir deney başlatmaya çalışıyor.

Şu durumlarda iyi bir seçim

  • Ekibiniz canlı kampanyaya taşımayı düşündüğü yapısal bir değişikliği tartışıyor, ama bu tek müdahale henüz taslakta orijinale karşı sınanmıyor.
  • Deney sonuç raporu üretebiliyor, ama karar kuralını kimin onaylayacağı ve uygulama, uzatma ya da bırakma kararını kimin vereceği netleşmiyor.
  • Canlı kampanyanın trafiği orijinal ile taslağı birlikte besleyebiliyor, bu yüzden planlanan pencere kapanmadan iki koldan biri hacimsiz kalmıyor.
  • Yapısal bir değişiklik, beklenenin altında kalırsa dönülecek bir taslak olmadan doğrudan canlı kampanyaya uygulanıyor.
  • Bir deney, planlanan süresi bitmeden günler önce okunuyor ve buna göre harekete geçiliyor.
  • İlk deney hâlâ çalışırken aynı kampanyada ikinci bir yapısal soru test edilmeye çalışılıyor.
  • Taslak süresince hangi raporların devre dışı kaldığı kontrol edilmediği için test ortasındaki bir hesap değişikliği gözden kaçıyor.

Şu durumlarda başka bir çalışma daha doğru

  • Önerilen değişiklik canlı kampanyaya doğrudan uygulanacak kadar düşük riskli görülüyor, bu yüzden tam deney penceresini beklemek gerçek bir belirsizliği çözmüyor.
  • Değişiklik Video, App ya da Shopping kampanyasında yapılacak, bu yüzden Google'ın taslak ve deney mekanizması onu kapsamıyor.
  • Ekip deney sürerken sonucu erken okumak ya da ayar değiştirmek istiyor, bu yüzden önceden belirlenen karar penceresi son kararı yönetemiyor.

Her kanalın kendi sorumlusu var

Zeo'da Ücretli Arama, Sosyal Medya Reklamları, CRO ve Programatik alanlarının her birini adı belli bir sorumlu yürütüyor. Aşağıdaki danışmanlar bu sayfanın konu aldığı kanala göre eşleşiyor, böylece gerçekte kiminle çalışacağınızı görebilirsiniz.

Kullandığımız araçlar

Bu işin arkasındaki araçlar

  • Optmyzr

    yürüyen deneyi izleyip sonucun planlanan bitiş tarihinden önce okunmasını engelliyor

Değişikliği uygulamadan önce test edelim

Sonuç ortaya çıkmadan önce belirlenmiş bir karar kuralıyla arama deneyi kuralım

Bir sonraki yapısal ya da stratejik değişikliğinizi, koruma metrikleri ve karar kuralı baştan konuşulmuş gerçek bir taslak ve bölünme deneyine çevirebiliriz.
Arama deneyinizi birlikte tasarlayalım

En sık duyduğumuz sorular

Taslak ile deney arasındaki fark nedir?

Taslak, canlı performansı etkilemeden değişiklik hazırlayabilmeniz için kampanyanızın bir kopyasını çıkarıyor. Deney ise bu taslağı, belirli bir süre boyunca gerçek bir trafik ve bütçe bölünmesiyle orijinaliyle yan yana çalıştırdığınızda ortaya çıkıyor.

Neden kampanya başına aynı anda yalnızca bir deney?

Google'ın platformu zaten buna izin veriyor ve bu doğru bir sınır. Aynı kampanyada iki yapısal testi aynı anda çalıştırmak, hiçbirinin sonucunu kendi değişikliğine temiz biçimde bağlayamamak demek.

Deney üç gün sonra harika görünüyorsa ne olur?

Çalışmaya devam ediyor. Karar kuralını ve süreyi tam olarak bunun için, erken ve iyi görünen bir okumanın bitmiş bir sonuçla karıştırılmaması için yayından önce belirliyoruz.

Her kampanya tipi bu tür bir deney çalıştırabiliyor mu?

Hayır. Taslaklar ve bu deney mekanizması Arama ve Görüntülü Reklam kampanyalarını kapsıyor. Video, Uygulama ve Shopping kampanyaları farklı bir test yaklaşımı gerektiriyor; onu ayrıca kapsamlandırıyoruz.