Reklamda değişiklik yapmadan önce beklentinizi, temel ölçümü ve karar kuralını yazın. Belirsizlikleri saklamadan sonuçları değerlendirmenize yardımcı bir test rehberi.
“Yeni görseli deneyelim” bir başlangıç fikridir; tek başına ölçülebilir bir test planı değildir. Testten ne beklediğinizi, neyi değiştireceğinizi ve sonucu nasıl yorumlayacağınızı önceden yazmadığınızda, sonradan her sonuca uygun bir açıklama bulmak kolaylaşır. Açık bir hipotez, sonuç istediğiniz gibi çıkmasa bile çalışmadan ne öğrendiğinizi anlamanızı sağlar.
Bu rehber reklam hesabınızda işlem başlatmaz. Aşağıdaki yaklaşım, test planınızı hazırlamak ve raporu daha dikkatli okumak içindir. Örnekler varsayımsaldır; belirli bir süre, bütçe veya performans artışı vaat etmez.
Hipotezi tek bir cümleyle kurun
Kullanışlı bir cümle şu yapıyı izleyebilir: “Şu değişikliği yaparsak, şu gerekçeyle, şu ölçümde bir farklılık görmeyi bekliyoruz.” Örneğin, “Ürünün kullanım biçimini ilk karede daha açık gösterirsek, uygun kişilerin ürün sayfasına geçişini kolaylaştırmayı bekliyoruz” denebilir.
Bu cümle nedenselliğin kanıtlandığını söylemez. Yalnızca kontrol edilecek beklentiyi tanımlar. “Bu görsel satışları kesin artıracak” gibi sonuç ilan eden ifadeler yerine, hangi davranışı neden etkilemeyi düşündüğünüzü açıklayın. Beklentinin hangi bilgiye dayandığını da bir cümleyle kaydedin.
Birincil ölçümü ve koruyucu ölçümleri ayırın
Her değişiklikten aynı anda daha fazla tıklama, daha ucuz sonuç ve daha yüksek satış beklemek, değerlendirmeyi belirsizleştirir. Önce temel soruyu yanıtlayacak bir ölçüm seçin. Sonra kararın başka bir alanda olumsuzluk yaratıp yaratmadığını gösterecek yardımcı ölçümleri belirleyin.
Örneğin bir reklam daha fazla tıklama getirirken ürün sayfasındaki sonraki davranış aynı yönde ilerlemeyebilir. Bu durumda yalnızca tıklama artışına bakarak başarılı ilan etmek eksik kalır. Seçtiğiniz ölçümlerin neyi gösterdiğini ve neyi göstermediğini test başlamadan önce yazın. Tıklama, sipariş ve kârlılık birbirinin yerine geçen sonuçlar değildir.
Değişkeni mümkün olduğunca açık tutun
Aynı anda görseli, hedef kitleyi, teklif yaklaşımını ve ürün fiyatını değiştirirseniz gözlenen farkı tek bir unsura bağlamak zorlaşır. Kontrol etmek istediğiniz değişkeni bir satırda belirtin. Sabit tutmayı planladığınız alanları da ayrıca listeleyin.
Her ortamda bütün dış etkileri sabit tutmak mümkün olmayabilir. Böyle durumlarda bunu saklamayın. Örneğin stok durumu veya site deneyimi değişmişse, test notuna ekleyin. Basit bir dönem karşılaştırmasının kontrollü deneyle aynı kanıt düzeyini sunmadığını kabul etmek, raporu daha yararlı hâle getirir.
Karar kuralını sonuçları görmeden yazın
“Hangi durumda devam edeceğiz, hangi durumda yeni ölçüm bekleyeceğiz?” sorusunu önceden cevaplayın. Bu kuralın mutlaka tek bir yüzdeye dayanması gerekmez. Verinin kapsamı, maliyet, sonuç sayısı ve işletmenin öncelikleri birlikte değerlendirilmelidir.
Herkes için geçerli tek bir gösterim, gün veya bütçe eşiği varsaymayın. Düşük hacimli bir hesapla yüksek hacimli bir hesap aynı sürede aynı miktarda bilgi üretmez. Gerekli örneklem veya istatistiksel değerlendirme konusunda emin değilseniz, belirsizliği raporda açık bırakın; küçük bir farkı kesin kanıt gibi sunmayın.
Ölçüm kapsamını önceden kaydedin
Test notunda tarih aralığı, reklam hesabı, kampanya kapsamı, para birimi ve sonuç tanımı bulunsun. Platforma atfedilen alışveriş ile mağazanın tüm siparişlerini aynı sayıyı temsil ediyormuş gibi değerlendirmeyin. İki kaynak arasındaki farkı açıklamak için önce ölçüm kapsamlarını ayırın.
Verinin ne zaman alındığını da yazın. Sonraki kontrol sırasında geçmiş günlerdeki rakamlar farklı görünürse, iki raporun alınma zamanını karşılaştırabilirsiniz. Farkın gerçek performans değişiminden mi, farklı kapsamdan mı yoksa veri güncellemesinden mi kaynaklandığı araştırılmalıdır. Ölçülmeyen bir alanı otomatik olarak sıfırla doldurmayın.
Sonucu üç başlıkla değerlendirin
İlk başlık “Ne gözledik?” olsun. Yalnızca veride gerçekten görülen değişimi anlatın. İkinci başlık “Bunu ne kadar güvenle yorumlayabiliriz?” olsun. Eksik günleri, düşük hacmi ve aynı dönemde değişen diğer koşulları burada belirtin.
Üçüncü başlık “Sonraki kontrolümüz ne?” olsun. Sonuç belirsizse daha fazla gözlem veya daha dar bir test gerekebilir. Sonuç beklentinin tersineyse, hemen başarısız ürün veya kötü müşteri kitlesi gibi geniş bir sonuca atlamayın. Hipotezin yanlış olabileceği kadar ölçüm planının da eksik kalmış olabileceğini değerlendirin.
Tek sayfalık test kaydı oluşturun
Kayıtta testin adı, başlangıç gerekçesi, değiştirilen alan, sabit tutulması hedeflenen koşullar ve birincil ölçüm yer alsın. Karar kuralını, rapor kapsamını, gözlenen sonucu ve sınırlamaları aynı sayfada tutun. Bu kayıt yalnızca kazananları listeleyen bir arşiv olmamalıdır.
Örneğin iki reklam arasında fark görülmemesi de anlamlı bir öğrenme olabilir. Ancak “fark görülmedi” ile “iki seçenek her koşulda aynıdır” aynı ifade değildir. Raporu okuyan kişi bu ayrımı anlayabilmelidir. Deney sırasında ortaya çıkan yeni bir soruyu da sonraki çalışmanın konusu olarak ayrı kaydedin.
Önce daha iyi bir soru sorun
Bir sonraki reklam değişikliğinizden önce hipotezinizi ekipten birine okutun. Hangi unsurun değişeceğini ve hangi ölçümle değerlendirileceğini aynı şekilde anlıyorsanız plan daha nettir. Farklı yorumlar çıkıyorsa reklamı değiştirmeden önce soruyu sadeleştirin.
AdLens’in analiz yaklaşımını incelerken de aynı alışkanlığı kullanabilirsiniz: önce ölçümün ne söylediğini okuyun, sonra olası açıklamaları değerlendirin. Bir yorum veya öneri, reklamınızı otomatik değiştiren bir talimat ya da başarı garantisi değildir. Son kararı veri kapsamını ve işletmenizin koşullarını birlikte değerlendirerek verin.
