Pazarlama analistleri için coğrafi artış testi: metodoloji rehberi

Coğrafi artış testi, reklam müdahalesini bazı coğrafyalara atayan, diğerlerini kontrol grubu olarak ayıran ve iki grup arasındaki bir iş KPI’ının nedensel farkını ölçen pazar düzeyinde artımsallık deneyidir. Güvenilir kullanıcı düzeyinde sinyalleriniz yoksa, kampanyalarınız aynı anda birden çok kanalda çalışıyorsa veya modellenmiş bir ilişkilendirme sayısı yerine doğrudan gelir ya da dönüşümlere bağlı nedensel tahmine ihtiyaç duyuyorsanız kullanın. Meta’nın açık kaynak araç setindeki GeoLift metodolojisi, Sentetik Kontrol Yöntemlerini yerleşik güç hesaplayıcısıyla birleştirerek bu deney tasarımını ekonometri doktorası gerektirmeden erişilebilir kılar.

Öne çıkan noktalar

Coğrafi artış testi, ancak güç analizi, pazar seçimi, sentetik kontrol doğrulaması ve temiz veri kampanya başlamadan uyumlu olduğunda güvenilir bir nedensel tahmin üretir.

Konu	Ayrıntılar
Önce güç analizi yapın	Tasarıma karar vermeden MDE, pazar sayısı ve süreyi uyumlandırmak için GeoLift güç hesaplayıcısını kullanın.
ABD testlerinde DMA kullanın	DMA’lar ayrıntı düzeyi ile istikrarı dengeler ve çoğu ABD coğrafi deneyi için önerilen coğrafi birimdir.
Sentetik kontrolü doğrulayın	Yayın öncesinde L2 dengesizliğini kontrol edin, zamansal plasebo testleri yapın ve donörleri birer birer çıkararak denetleyin.
Artışı iROAS’a çevirin	Paydaşlara karara hazır metrik vermek için ek geliri müdahale pazarlarındaki ek harcamaya bölün.
Testten önce kreatifi doğrulayın	Test öncesinde kreatif düzeyindeki varyansı azaltmak, pazar veya gün eklemeden etkin MDE’nizi daraltır.

İçindekiler

Coğrafi artış testi nedir, ne zaman kullanılmalıdır?
Coğrafi artış testini baştan sona nasıl yapılandırmalısınız?
Coğrafi artış testi için güç analizi nasıl yapılır?
Müdahale ve kontrol coğrafyaları nasıl seçilir ve doğrulanır?
Sentetik kontrol yöntemleri karşıolgusal senaryoyu nasıl kurar?
Coğrafi artış testi hangi verileri ve ölçüm altyapısını gerektirir?
Artış nasıl hesaplanır ve iş etkisine dönüştürülür?
Coğrafi artış testindeki en yaygın hatalar nelerdir?
Coğrafi artış testiniz için kopyalanabilir kontrol listesi ve örnek takvim
Kreatif doğrulamayla test öncesinde gürültüyü azaltın
Çoğu coğrafi artış testi rehberinin yanlış ele aldığı noktalar
Kaynaklar
Sık sorulan sorular

Coğrafi artış testi nedir, ne zaman kullanılmalıdır?

Rastgele kontrollü deneyler, yani RCT’ler, nedensel çıkarımın altın standardıdır. Ancak çerezsiz, gizlilik öncelikli ortamda giderek daha az uygulanabilir olan kullanıcı düzeyinde rastgele atama gerektirirler. Kullanıcı düzeyinde rastgele atama mümkün olmadığında tercih edilen yarı deneysel alternatif coğrafi artış testidir.

Temel işleyiş basittir. Coğrafyaları müdahale ve kontrol gruplarına ayırır, kampanyayı müdahale pazarlarında yürütür ve kampanya olmasaydı bu pazarlarda ne olacağını tahmin etmek için sentetik bir karşıolgusal senaryo kurarsınız. Gözlenen KPI ile karşıolgusal KPI arasındaki fark, artımsal artışınızdır.

Artıları:

KPI reklam platformu değil pazar düzeyinde ölçüldüğü için kanallar arası etkileri yakalar
Çerezler veya kullanıcı tanımlayıcıları olmadan çalışır
Gelir veya sipariş gibi gerçek iş metriğine bağlı nedensel tahmin üretir
TV, açık hava ve ücretli sosyal medya dahil aynı anda her türlü kanal karmasına uygulanabilir

Eksileri:

Müdahale ve kontrol fiziksel olarak komşuysa coğrafi taşma kontrol pazarlarını kirletebilir
Kararlı sentetik kontrol kurmak için yeterli coğrafya gerektirir; bu küçük markalar için kısıt olabilir
Pazar düzeyinde toplulaştırma daha fazla varyans yarattığı için kullanıcı düzeyindeki RCT’lerden daha gürültülüdür
Platforma yerleşik artış çalışmalarından operasyonel olarak daha ağırdır

Basit farkların farkı (DiD) yaklaşımından temel istatistiksel ayrım, karşıolgusal senaryonun kurulmasıdır. DiD, müdahale ve kontrol arasında paralel eğilimler varsayar. GeoLift’in kullandığı Sentetik Kontrol Yöntemleri (SCM) ise müdahale pazarının müdahale öncesi eğilimini en iyi taklit eden donör pazarların ağırlıklı birleşimini oluşturur. Paralel eğilimler varsayılamadığında bu ağırlıklı sentetik kontrol daha güvenilir bir karşıolgusal senaryodur.

Coğrafi artış testini baştan sona nasıl yapılandırmalısınız?

Her güvenilir coğrafi deneyi üç aşama tanımlar: test öncesi kurulum, canlı test dönemi ve test sonrası analiz. Her aşamanın vazgeçilmez bir ilk eylemi vardır.

Üç aşamalı coğrafi artış testi süreç şeması

Test öncesi kurulum

Pazar seçimine dokunmadan önce en az 10–12 haftalık günlük coğrafi KPI verisini alın. Eksik günler, promosyonlardan veya dış olaylardan kaynaklanan aykırı sıçramalar ve ön dönem karşılaştırılabilirliğini bozacak mağaza açılışları ya da dağıtım genişlemeleri gibi iş değişiklikleri açısından veriyi kontrol edin. Pazar büyüklükleri önemli ölçüde farklıysa KPI’nızı nüfusa veya gösterimlere göre normalize edin. Her kısıtı belgeleyin: operasyonel nedenlerle kullanamayacağınız pazarlar, test penceresindeki planlı promosyonlar ve önceden takvime alınmış kanal değişiklikleri.

Test dönemi

Kampanya yayına çıkmadan müdahale atamanızı sabitleyin ve yazılı kaydedin. Nasıl ele alınacağına ilişkin önceden tanımlı protokolünüz yoksa test ortasında harcama düzeylerini, kreatifi veya hedeflemeyi değiştirmeyin. Takip kesintilerini veya bulaşmayı erken yakalamak için hem müdahale hem kontrol pazarlarının günlük KPI’ını izleyin. Çoğu testte iki veya üç günde bir izleme yeterlidir; KPI’nız oynaksa günlük izlemeye değer.

Test sonrası analiz

Nihai sayıları almadan önce kampanya bitiminden sonra bir bekleme penceresi bırakın. Analizi çok erken keserseniz özellikle uzun satın alma döngülerindeki gecikmiş dönüşümler artışı eksik saydırır. SCM çıkarımınızı yürütün, ortalama müdahale etkisini hesaplayın ve sonuçları paydaşlara sunmadan yüzde artışı ek gelir ile iROAS’a dönüştürün. Testin tekrarlanabilmesi veya sorgulanabilmesi için test ortasındaki anormallikler dahil tüm denetim izini belgeleyin.

Coğrafi artış testi için güç analizi nasıl yapılır?

En önemli tek kural: test tasarımına karar vermeden güç analizi yapın. Bunu atlamak, coğrafi testlerin belirsiz sonuç vermesinin en yaygın nedenidir; çünkü test, gerçekte gerçekleşen artışı tespit edecek boyutta hiç kurulmamıştır. GeoLift güç hesaplayıcısı; test pazarlarını, test uzunluğunu ve gerekli yatırımı aynı anda planlamak için üç mod sunar.

Güç analizi için şu girdileri toplayın:

Geçmiş KPI başlangıç düzeyi: Coğrafi düzeyde, ideal olarak 10–12 haftalık günlük veri.
Ön dönem varyansı: Aday pazarlarınız arasındaki değişkenlik.
Tespit edilebilir en küçük etki (MDE): Ticari açıdan anlamlı gördüğünüz yüzde artış olarak ifade edilir.
İstenen güven düzeyi ve istatistiksel güç: Başlangıç alt sınırı olarak genellikle %90 güven ve %80 güç.
Aday coğrafya sayısı: Müdahale ve kontrol için kullanılabilir olanlar.
Test süresi: Kampanya takviminizle sınırlanan gün sayısı.
Varsayılan iROAS veya ek dönüşüm başına maliyet: İstatistiksel gücü harcama tahminine çevirmek için.

MDE, coğrafya sayısı ve süre kavramsal olarak şöyle etkileşir. Müdahale pazarı sayısını artırmak, müdahale etkisi tahmininin varyansını azaltır; bu da sabit sürede MDE’yi düşürür. Süreyi uzatmak, modelin sentetik kontrolü uydurması için daha fazla ön dönem sinyali sağlar ve kesinliği de artırır. MDE eşiğini yükseltmek, yani yalnızca daha büyük etkileri önemsediğinizi kabul etmek, daha az pazarla daha kısa testler yapmanızı sağlar. GeoLift uygulamalı anlatımı, 40 ABD şehrinden simüle verilerle bunu gösterir ve her parametre ayarlandığında güç çıktısının nasıl değiştiğini açıklar.

Uzman ipucu: Bütçe müdahale pazarı sayısını sınırlıyorsa pazar sayısından önce test süresine öncelik verin. Daha uzun ön dönem, sentetik kontrolün uyumu için daha fazla sinyal verir ve daha az donör pazarı olmasını kısmen telafi eder. Tersi geçerli değildir: yeterli ön dönem verisi olmadan pazar eklemek kararsız sentetik kontrol üretir.

Müdahale ve kontrol coğrafyaları nasıl seçilir ve doğrulanır?

Geçmişte istikrarlı, KPI ve temel belirleyicileri bakımından birbirine benzer ve güvenilir sinyal üretecek kadar büyük pazarları tercih edin. Tek seferlik promosyon sıçraması veya dağıtım değişikliği yaşamış bir donör pazardaki istikrarsızlık, sentetik kontrolü bozar.

Değerlendirilecek eşleştirme ölçütleri:

Ön dönem boyunca başlangıç KPI düzeyi ve eğilimi
Özellikle kategorinizde güçlü bölgesel mevsimsellik varsa mevsimsellik uyumu
Veri varsa demografik yapı ve kanal dağılımı benzerliği
Test penceresinde planlı operasyonel değişiklik bulunmaması

Belirlenmiş Pazar Alanları (DMA), ABD merkezli testlerin çoğu için önerilen coğrafi birimdir. Ayrıntı düzeyi ile istikrarı dengeler ve çoğu medya platformunun coğrafi dağıtımı raporlama biçimiyle uyumludur.

Yayın öncesinde yapılacak doğrulama testleri:

L2 dengesizliği ve ölçeklenmiş L2 dengesizliği metrikleriyle sentetik kontrol uyum denetimi yapın. Düşük ölçeklenmiş L2 dengesizliği, sentetik kontrolün ön dönemde müdahale pazarını yakından izlediğini gösterir. Aynı modeli müdahale yapılmamış bir ön dönem penceresine uygulayıp tahmini artışın sıfıra yakın olduğunu kontrol ederek plasebo testleri yapın. Varsa geçmiş kampanya dönemlerinde geriye dönük testler yürütün.

Erken işaretlenmesi gereken operasyonel kısıtlar: Müdahale ve kontrol DMA’ları bir medya pazarını veya fiziksel perakende alanını paylaşıyorsa en büyük risk coğrafi bulaşmadır. Asgari coğrafya büyüklüğü de önemlidir. Çok küçük pazarlar, sentetik kontrolle uyumlandırılması zor gürültülü KPI serileri üretir.

Sentetik kontrol yöntemleri karşıolgusal senaryoyu nasıl kurar?

SCM’ler, müdahale pazarının müdahale öncesi eğilimini en iyi taklit eden, müdahale uygulanmamış donör pazarların ağırlıklı birleşimini kurar. Bu ağırlıklı sentetik kontrol daha sonra karşıolgusal senaryo olur: kampanya olmasaydı müdahale pazarının KPI’ı nasıl görünürdü? Artış tahmini, müdahale sonrası gözlenen KPI ile sentetik karşıolgusal senaryo arasındaki farktır.

GeoLift güvenilirliği artırmak için iki varyantı birleştirir. Geliştirilmiş Sentetik Kontrol Yöntemleri (ASCM), ön dönem eşleşmesinin tam olmamasından kaynaklanan hatayı azaltan bir yanlılık düzeltmesi ekler. Hiçbir tek donör pazar veya birleşim müdahale pazarını kusursuz yansıtmadığında bu yaygındır. Genelleştirilmiş Sentetik Kontrol (GSC), çerçeveyi etkileşimli sabit etkiler panel modellerine genişletir; müdahale etkileri pazarlar arasında heterojen olduğunda nedensel çıkarıma daha güçlü teorik temel sağlar. Cambridge Core’daki GSC makalesi bu yaklaşımın akademik temelini sunar. GeoLift GitHub deposunda belgelendiği gibi ASCM ve GSC’yi birleştirmek, küçük örneklemlerde sağlam çıkarım sağlarken tam olmayan eşleşmeden kaynaklanan yanlılığı azaltır.

Her uygulayıcının yapması gereken sağlamlık kontrolleri:

Zamansal plasebo: Modeli müdahale olmayan bir ön dönem penceresine uygulayın ve tahmini etkinin sıfıra yakın olduğunu doğrulayın.
Donörleri birer birer çıkarma kontrolü: Her donör pazarı sırayla çıkarın ve karşıolgusal senaryonun kararlı kaldığını doğrulayın.
L2 dengesizliği tanıları: Yüksek L2 dengesizliği puanı, zayıf ön dönem uyumuna ve güvenilmez karşıolgusal senaryoya işaret eder.
Donör havuzu bileşimine duyarlılık: Havuzdan pazar ekleyip çıkarın ve artış tahmininin kayda değer biçimde değişip değişmediğini kontrol edin.

Çıkarım için iktisadi yöntemler literatürü, geleneksel asimptotik çıkarımın güvenilmez olabildiği küçük örneklemli coğrafi deneylerde geçerli güven aralıkları üretmek üzere parametrik bootstrap ve geliştirme yaklaşımları önerir. SCM tanılarına ilişkin Berkeley çalışma makalesi, önerilen yanlışlama testlerinin tamamını açıklar.

Coğrafi artış testi hangi verileri ve ölçüm altyapısını gerektirir?

Temiz, eksiksiz, günlük coğrafi veri vazgeçilmez temeldir. Eksik günler, tutarsız coğrafya tanımları veya farklı ölçüm yöntemlerini karıştıran KPI serileri sentetik kontrol uyumunu bozar.

Olmazsa olmaz veri öğeleri:

Günlük coğrafi KPI (sipariş, gelir, uygulama yüklemesi veya ölçtüğünüz iş metriği)
Normalizasyon için coğrafi düzeyde payda serileri: kullanıcı, oturum veya gösterim
Müdahale dönemi için kanal ve coğrafyaya göre günlük harcama
Çok kanallı test yürütüyorsanız kanal maruziyet verisi

Toplulaştırma ve ön dönem rehberi:

KPI serisinde haftalık yerine günlük sıklık tercih edilir; haftalık toplulaştırma güç hesaplayıcısının ihtiyaç duyduğu varyans sinyalini kaybettirir
Ön dönem, planlanan test süresinin en az iki katı; oynak KPI’larda ideal olarak üç katı olmalıdır
Eksik günleri enterpolasyonla doldurmak yerine açıkça işaretleyin; enterpolasyon gerçek veri boşluklarını gizleyebilir

Veri temizliği kuralları:

Test sırasında tekrarlanması beklenmeyen ön dönem promosyon olaylarını maskeleyin. Olay zamanlarını pazarlar arasında hizalayın: müdahale ve kontrol pazarlarına farklı günlerde ulaşan ulusal indirim, yapay ayrışma yaratır. Mağaza açılışları, dağıtım genişlemeleri veya bir pazarı etkileyip diğerlerini etkilemeyen iş değişiklikleri için normalizasyon yapın. Her normalizasyon kararını değişiklik günlüğüne kaydedin.

Ölçüm altyapısı notu: Kampanya başlamadan müdahale atamasını sürümlenmiş bir belgeye kaydedin. Kreatif değişimleri, bütçe kaymaları veya hedefleme ayarları dahil test ortası değişiklikleri zaman damgalarıyla günlüğe alın. Bu denetim izi, test sonuçlarını şüpheci paydaşa savunmanızı veya tasarımı gelecekteki deneyde tekrarlamanızı sağlar.

Artış nasıl hesaplanır ve iş etkisine dönüştürülür?

GeoLift modelinin çıktısı tahmini ortalama müdahale etkisidir (ATE): müdahale pazarlarında gözlenen KPI ile sentetik karşıolgusal senaryo arasındaki farkın test dönemi ortalaması. Sonuca varmadan bunu güven aralığı ve p değeriyle birlikte okuyun.

Hesaplama tarifi:

Yüzde artış = (müdahale pazarlarında gözlenen KPI eksi karşıolgusal KPI) bölü karşıolgusal KPI; yüzde olarak ifade edilir.
Ek dönüşümler = yüzde artış çarpı test dönemi boyunca müdahale pazarlarındaki başlangıç dönüşüm hacmi.
Ek gelir = ek dönüşümler çarpı ortalama sipariş değeri.
iROAS = ek gelir bölü müdahale pazarlarındaki ek harcama.

Paydaşlar için karar kuralları:

Güven aralığı sıfırı dışladığında ve p değeri önceden belirlenmiş eşiğin altına düştüğünde sonuç eyleme geçirilebilir. Daha küçük örneklemler nedeniyle coğrafi deneylerde bu eşik genellikle 0,10’dur. Güven aralığının sıfırın iki yanına uzandığı belirsiz sonuç, artışın sıfır olduğu anlamına gelmez. Testin seçilen eşikte artışı tespit edecek güce sahip olmadığı anlamına gelir. Bu ayrımı açıkça raporlayın.

Bu pazarlardaki ek harcama 40.000 dolar ise iROAS 2,5’tir. Bütçe kararını yönlendiren, tek başına yüzde artış değil bu sayıdır. Uygulayıcı rehberleri, paydaşların hem büyüklüğü hem tahminin belirsizliğini anlaması için iROAS’ın güven aralığıyla birlikte sunulmasını önerir.

Coğrafi artış testindeki en yaygın hatalar nelerdir?

En yaygın ölümcül hata, önceden güç analizi yapmadan testi başlatmaktır. Sonuçta yorumlayamadığınız bir bulgu kalır: artış mı yoktu, yoksa test onu tespit etmek için çok mu küçüktü? Her seferinde önce güç hesaplayıcısını çalıştırın.

Yaygın hatalar:

Yetersiz güçlü testler: Çok az pazar, çok kısa süre veya testin gerçekçi biçimde tespit edebileceğinden düşük MDE.
Zayıf donör havuzu seçimi: Ön dönemde yapısal kırılmalar, promosyon anormallikleri veya operasyonel değişiklikler olan pazarları dahil etmek.
Bulaşma ve taşma: Aynı medya pazarını, perakende alanını veya dağıtım ağını paylaşan müdahale ve kontrol pazarları.
Promosyon uyumsuzluğu: Test penceresinde müdahale pazarlarında olup kontrol pazarlarında olmayan veya tersi olan promosyon, reklam artışından ayrılması imkansız bir karıştırıcı etken yaratır.
Yanlış tanımlanmış KPI’lar: Sipariş veya gelir gibi iş düzeyi KPI yerine platformun raporladığı dönüşümleri ölçmek, ilişkilendirme yanlılığını yeniden getirir.

Çözümler ve iyi uygulamalar:

Ön dönem verisindeki tüm promosyonları maskeleyin ve test penceresinde hiçbir pazarda promosyon planlamayın
Nihai çıkarımı yapmadan önce kampanya bitiminden sonra en az üç ila beş günlük bekleme penceresi kullanın; satın alma döngüsü uzun ürünlerde daha uzun bekleyin
Donör pazarları temkinli seçin: sınırda bir pazarı dışlamak, sentetik kontrolü bozacak olanı dahil etmekten iyidir
Varsa coğrafi artış sonucunu platforma yerleşik artış çalışması veya MMM çıktısıyla çapraz kontrol edin; yöntemler arasındaki yön uyumu güveni artırır

Test sırasında erken uyarı izlemesi: Hem müdahale hem kontrol pazarlarının günlük KPI’ını kontrol edin. Kontrol pazarlarında karşılık gelen müdahale değişikliği olmadan ani ayrışma, sıçrama veya düşüş bulaşma sinyalidir. Müdahale pazarlarında KPI’ın sıfıra veya gerçek dışı düzeye düştüğü takip kesintisi, test sonrası çıkarımı bozmadan hemen araştırılmalıdır.

Coğrafi artış testiniz için kopyalanabilir kontrol listesi ve örnek takvim

Hızlı satın alınan ürünlerde asgari güvenilir takvim yaklaşık sekiz haftadır: iki ila üç hafta test öncesi doğrulama, iki ila üç hafta canlı test ve bir hafta bekleme ile analiz. Daha uzun satın alma döngülerinde yalnızca canlı test dönemi için dört ila altı hafta planlayın.

Kopyalanabilir kontrol listesi:

10–12 haftalık günlük coğrafi KPI verisini alın ve tutarlılık kontrolleri yapın
İş KPI’ını ve normalizasyon yöntemini tanımlayın
Aday müdahale ve kontrol coğrafyalarını belirleyin (ABD testlerinde DMA önerilir)
GeoLift güç hesaplayıcısıyla güç analizi yapın; MDE, pazar sayısı ve sürenin uyumlu olduğunu doğrulayın
Sentetik kontrol uyum denetimlerini yapın: L2 dengesizliği, ölçeklenmiş L2 dengesizliği ve plasebo testleri
Müdahale atamasını ve tüm operasyonel kısıtları sürümlenmiş uygulama rehberine kaydedin
Ön dönem promosyonlarını maskeleyin ve test penceresindeki planlı promosyonları işaretleyin
Kampanyayı yalnızca müdahale pazarlarında başlatın; başlangıç tarihini ve harcama hedeflerini kaydedin
İki grubun da günlük KPI’ını izleyin; anormallikleri zaman damgalarıyla kaydedin
Kampanyayı bitirin; bekleme penceresini başlatın (hızlı satın alınan ürünlerde en az üç ila beş gün)
GeoLift çıkarımını yürütün; ATE, güven aralığı, p değeri, yüzde artış, ek gelir ve iROAS’ı hesaplayın
Sonuçları ve denetim izini belgeleyin; paydaşlara güven aralığıyla sunun

Örnek takvim (hızlı satın alınan ürün):

1–14. günler: Veri alma, tutarlılık kontrolleri, pazar seçimi, güç analizi ve yayın öncesi doğrulama.
15–35. günler: Günlük izlemeyle canlı test dönemi.
36–42. günler: Bekleme penceresi ve test sonrası çıkarım.
43–45. günler: Sonuçların belgelenmesi ve paydaş sunumu.

Kreatif doğrulamayla test öncesinde gürültüyü azaltın

Coğrafi test başlamadan kreatifinizi ve hedef kitlenizi doğrulayın. Bir reklam konseptinin kanal veya coğrafyadan bağımsız nedenlerle diğerinden çok daha iyi performans gösterdiği kreatif düzeyindeki varyans, KPI’ınıza sentetik kontrolün gerçek coğrafi artıştan ayıramayacağı gürültü ekler. Test öncesinde bu varyansı azaltmak, pazar sayısını veya süreyi değiştirmeden etkin MDE’nizi iyileştirir.

Uygulamalı iş akışı üç adımlıdır. İlk olarak, hangi konseptlerin istikrarlı ve öngörülebilir tepki oranları verdiğini belirlemek için küçük ölçekte kreatif A/B doğrulamaları yapın. İkinci olarak, kreatifinizin müdahale planladığınız pazarların psikografik profillerinde karşılık bulup bulmadığını sentetik hedef kitle puanlamasıyla kontrol edin. Üçüncü olarak, tam coğrafi deneye geçmeden ölçüm altyapınızı ve KPI hattınızı doğrulamak için tek pazarda küçük ölçekli kanal pilotu yürütün.

Uzman ipucu: POPJAM’ın sentetik persona simülasyonu, herhangi bir harcama yayına girmeden reklam kreatiflerini hedef pazarlarınızın psikografik profilleriyle puanlamanızı sağlar. Bu puanlamayı güç analizinden önce yapmak daha dar varyans tahmini verir; bu da MDE hesabınızın kesinliğini doğrudan artırır. Test öncesi doğrulama adımını tamamlayan kreatif test iş akışlarını ve hedef kitle araştırma yöntemlerini inceleyebilirsiniz.

Test öncesi kreatif doğrulamayı yeterli güce sahip coğrafi deneyle birleştirmek, harekete geçebileceğiniz sonuca ulaşmanın en hızlı yoludur. Coğrafi test, kanalın ek iş sonuçları üretip üretmediğini yanıtlar. Kreatif doğrulama, mesajın işe yarayıp yaramadığını yanıtlar. İkisini birlikte yürütmek, sıfır sonucun kanaldan mı kreatiften mi kaynaklandığını merak etmek zorunda kalmamanızı sağlar.

Sıradaki coğrafi testinizden önce kreatif varyansını azaltmak ister misiniz? POPJAM markaya uygun reklam kreatifleri üretir ve tek bir dolar harcama taahhüdünden önce sentetik alıcı personalarıyla puanlar. Bu, daha temiz girdiler, daha dar varyans tahminleri ve yaratmak için çalıştığınız artışı gerçekten tespit eden coğrafi testler demektir.

POPJAM

POPJAM’ın yapay zeka reklam hazırlama aracını deneyin ve yayın öncesi kreatif testinin coğrafi deneylerinizin tespit edebileceklerini nasıl değiştirdiğini görün.

Kreatif doğrulamayla test öncesinde gürültüyü azaltın, genel bakış şeması

Çoğu coğrafi artış testi rehberinin yanlış ele aldığı noktalar

Çoğu rehber coğrafi artış testini istatistik sorunu olarak ele alır. Öyle değildir. Yanıtını üretmek için istatistik kullanan bir ölçüm operasyonları sorunudur.

En sık görülen tavsiyeler doğru model varyantını seçmeye, ASCM ile GSC’yi tartışmaya veya donör havuzu ağırlıklarını ayarlamaya odaklanır. Kirli veriyle kurulmuş kusursuz tanımlı sentetik kontrol, yanlış şeyin kesin tahminini verir.

Rehberlerin küçümsediği ikinci şey kreatifin karıştırıcı etkisidir. Test edilmemiş kreatifle coğrafi test yaparsanız kanal ile mesajın birleşik etkisini ölçersiniz. Sıfır sonuç, kanalın işe yaramadığı veya kreatifin o belirli pazarlarda karşılık bulmadığı anlamına gelebilir. İkisini sonradan ayıramazsınız. Küçük ölçekli pilot, sentetik persona puanlaması veya yayın öncesi simülasyonla coğrafi testten önce kreatif doğrulama yapmak hoş bir ek adım değildir. Coğrafi test sonucunu yorumlanabilir kılan şeydir.

Gözden kaçan üçüncü nokta bekleme penceresidir. Çoğu ekip analizi kampanyanın bittiği gün keser. Satın alma döngüsü 48 saatten uzun olan her üründe bu, artışı eksik sayar. Sentetik kontrol karşıolgusal eğilimi yakalar; ancak kampanya bittikten sonra müdahale pazarlarına gerçek dönüşümler gelmeye devam ediyorsa ATE’niz düşük gösterilir. En az üç ila beş gün, düşünülerek yapılan satın almalarda daha uzun bekleyin.

Zaman veya coğrafya kısıtınız varsa süreye pazar sayısından önce öncelik verin ve başka bir şey yapmadan güç hesaplayıcısını çalıştırın.

Kaynaklar

Aşağıda, amaca göre sıralanmış temel başvuru kaynakları yer alır.

Test planlamak istiyorsanız: Tam deney tasarımı çerçevesini, güç hesaplayıcılarını ve GeoLift’in çıkarımda kullandığı ASCM ile GSC birleşimini ele alan GeoLift metodoloji belgeleriyle başlayın.

Kodu uygulamak istiyorsanız: GeoLift GitHub deposu pazar seçimi, güç analizi, çıkarım ve çizim için tüm işlevleri içerir. GeoLift uygulama örneği, 40 ABD şehri için simüle verilerle veri alımından artış tahminine kadar tam bir örnek yürütür.

İstatistiksel teoriyi doğrulamak istiyorsanız: Cambridge Core’daki Genelleştirilmiş Sentetik Kontrol makalesi, etkileşimli sabit etkiler modelleri ve sağlam nedensel çıkarım için akademik temel sağlar. AEA Journal of Economic Perspectives’teki SCM çıkarımı yazısı, küçük örneklemlerde geçerli belirsizlik tahminleri için bootstrap ve geliştirme yaklaşımlarını ele alır. Berkeley’nin SCM tanıları çalışma makalesi önerilen yanlışlama testlerini açıklar.

Uygulamaya uyarlamak için: Triple Whale GeoLift rehberi; DMA seçimi, zamanlama kuralları ve iROAS dönüşümü dahil metodolojiyi pazarlama iş akışlarına çevirir.

Sık sorulan sorular

Pazarlamada coğrafi artış testi nedir?

Coğrafi artış testi, reklamın nedensel etkisini tahmin etmek için müdahale uygulanan coğrafyalardaki bir iş KPI’ını sentetik veya eşleştirilmiş kontrol grubuyla karşılaştıran pazar düzeyinde artımsallık deneyidir. Kullanıcı düzeyinde rastgele atama mümkün olmadığında tercih edilen yöntemdir.

Coğrafi artış testi için kaç pazar gerekir?

Sabit bir asgari sayı yoktur. GeoLift güç hesaplayıcısı, hedef istatistiksel güce ulaşan pazar sayısı, test süresi ve MDE birleşimini bulmanıza yardımcı olur. Daha fazla pazar varyansı azaltır; daha az pazar daha uzun süre veya daha yüksek MDE eşiği gerektirir.

Coğrafi artış testi ne kadar sürmelidir?

Uygulayıcı rehberleri, hızlı satın alınan ürünler için yaklaşık en az 15 gün, daha uzun satın alma döngüleri için dört ila altı hafta ve kampanya bitiminden sonra en az üç ila beş günlük bekleme penceresi önerir.

Coğrafi artış ile MMM arasındaki fark nedir?

Coğrafi artış testi, tanımlı dönemde belirli pazarlarda belirli bir kampanya için nedensel tahmin üretir. Medya Karması Modellemesi (MMM), daha uzun geçmiş pencere boyunca tüm medya karmasında kanal düzeyindeki katkıyı tahmin eder. İki yöntem tamamlayıcıdır: coğrafi artış sonuçları MMM katsayılarını kalibre etmek için kullanılabilir.

Coğrafi artış testinde iROAS ne anlama gelir?

iROAS, reklam harcamasının artımsal getirisi demektir. Artış tahmininden elde edilen ek geliri, test döneminde müdahale pazarlarındaki ek harcamaya bölerek hesaplarsınız. İstatistiksel artış tahminini bütçe kararına çeviren, iş kullanımına hazır metriktir.