Geo-Lift Testleri: Türkiye için Pratik Incrementality Çerçevesi.
Cookie sonrası dünyada "bu reklam gerçekten satış üretti mi?" sorusunun en güvenilir cevabı geo-lift testidir. İl bazında bir grup tedavi (treatment), bir grup kontrol; aradaki fark saf reklam etkisi. Bu rehber Türkiye reklam hesabı için tasarım, güç hesabı, treatment/kontrol seçimi ve sonuç yorumlamayı sıfırdan anlatıyor — açık kaynak araçlarla pratik bir akış.
Geo-lift testi, bir reklam kanalının artımlı satış etkisini deneysel olarak ölçer: bazı illerde reklam aktif (treatment), diğerlerinde kapalı (kontrol). İki grubun satış trendleri karşılaştırılarak saf lift çıkarılır. Tipik test 6-7 hafta sürer (2 hafta pre + 4 hafta treatment + 1 hafta wash-out). Türkiye için Meta GeoLift (R, açık kaynak) veya Google CausalImpact kütüphaneleri kullanılır. Maliyet: aylık reklam bütçesinin %5-10'u (fırsat maliyeti). Sonuç: cookie-bağımsız "gerçek lift" rakamı; MMM'i çapraz doğrulamak ve agresif bütçe kararlarını sağlamlaştırmak için altın standart.
// 01Geo-lift testi nedir?
Geo-lift testi (geographic lift test, geo holdout, geo experiment), bir reklam kanalının veya kampanyasının artımlı satışa etkisini deneysel olarak ölçen randomize-edilmiş bir saha deneyidir. Mantığı sade: coğrafi bölgeleri iki gruba ayır — bir grupta reklam aktif (treatment), diğerinde kapalı veya hafif (kontrol) — ve iki grubun satış trendleri arasındaki farkı ölç. Bu fark "olsaydı" simülasyonuna kıyasla saf incremental lifttir.
"Cookie öldü, kullanıcı seviyesinde tıklama izleyemiyorum" probleminin yanıtıdır geo-lift. Çünkü kullanıcı seviyesinde değil, bölge seviyesinde agregasyon yapar. Bir bölgenin satış toplamı; cookie kaybı, ITP, ad-blocker — hiçbiri etkilemez. Sadece "kasaya kaç para girdi?" rakamına bakılır.
// 02Neden geo-lift? Diğer yöntemlerle farkı
Reklam etkisini ölçmenin üç ana yolu var. Her birinin güçlü ve zayıf tarafı:
| Yöntem | Tipi | Cookie bağımlı | Nedensel | Maliyet |
|---|---|---|---|---|
| MTA (multi-touch) | Gözlemsel | Tam | Hayır | Düşük |
| MMM | Gözlemsel | Hiç | Kısmen | Yüksek (kurulum) |
| Geo-lift | Deneysel | Hiç | Evet | Orta (fırsat maliyeti) |
| User-level RCT | Deneysel | Tam | Evet | Çok yüksek |
Operasyonel ekipler için tipik akış: MTA günlük operasyonu yönetir, MMM çeyreklik bütçe dağılımını yapar, geo-lift büyük kararları (yeni kanal açma, kanal kapatma, agresif bütçe artışı) doğrulamadan önce ölçer.
Geo-lift'in özgün gücü
- Cookie-bağımsız. Kullanıcı izleme yokken bile çalışır.
- Halo etki yakalar. Reklam görmeyen kullanıcının arkadaşının görüp ona söylemesi de tedavi grubunda satış olarak görünür.
- Walled garden agnostik. Meta, Google, TikTok hepsi için aynı yöntem.
- İş tarafının anladığı dil. "İstanbul'da reklam kapattık, satış %X düştü." Karmaşık modele gerek yok.
Sınırlamaları
- Coğrafi homojen ürün/hizmet için zayıf. SaaS gibi her ilde aynı oranda hitap eden ürünlerde, bölgesel varyasyon az; istatistiksel güç düşer.
- Çok küçük markalarda zorlanır. Tipik minimum: aylık 50K TL kanal harcaması ve haftalık 100+ satış.
- Bölge sınırı geçişgenliği. İstanbul'da gösterilen bir TV reklamı çevre illerde de izlenebilir; geo-lift bunu kontrol grubu kontaminasyonu olarak hesaba katmalı.
// 03Synthetic control: işin matematiği
"İlki kapatırsam ne olur?" sorusunun cevabını karşı-olgusal (counterfactual) tahminle veriyoruz. Yani "İstanbul'da reklam kapansaydı, satış nasıl olurdu?" diye bir paralel evren hayal ediyoruz. Synthetic control yöntemi bu paralel evreni veriyle inşa eder.
Mantığı
Treatment ilini kapattıktan sonra, geçmiş veriden bu ile en çok benzeyen bir kontrol "bileşeni" oluştur. Bu bileşen, gerçek illerin ağırlıklı ortalamasıdır. Örnek: İstanbul'un sentetik ikizi 0.4 × Ankara + 0.3 × İzmir + 0.2 × Bursa + 0.1 × Antalya gibi olabilir. Bu ağırlıklar, geçmiş satış trendlerinin İstanbul'la en yakın olacak şekilde optimize edilir.
Test sırasında: gerçek İstanbul satışı ile sentetik İstanbul satışı arasındaki fark = lift. Bu fark istatistiksel olarak anlamlıysa, ölçtüğün bir gerçek etki var demektir.
// 04Türkiye için coğrafi tasarım
Türkiye'nin 81 ili, geo-lift için zengin bir coğrafi grid sunar. Pratikte üç yaklaşım var:
Yaklaşım 1: Tek büyük şehir vs. sentetik kontrol
İstanbul'u treatment ili olarak seç, geri kalan 80 ilden sentetik kontrol oluştur. Avantaj: İstanbul'un satış hacmi büyük, lift kolay tespit edilir. Dezavantaj: İstanbul tek başına ülke bazlı etkilerden farklı davranabilir; sonuç ülke geneline genelleştirilemez.
Yaklaşım 2: 5-10'lu il cluster'ları
Treatment grubu: Adana, Mersin, Gaziantep, Hatay, Şanlıurfa (Güney). Kontrol: kalan 76 il. Avantaj: Daha temsil edici sonuç. Dezavantaj: Her ilde reklam aktif/pasif yapmak için ad platformunda granular targeting gerekir.
Yaklaşım 3: Çift körleme — 3 büyük + sentetik
Treatment: İstanbul + Ankara + İzmir. Sentetik kontrol: kalan 78 il. Avantaj: Üç büyükşehirin toplamı ülke satışının %40-50'sini kapsar; lift büyük olur. Dezavantaj: Sentetik ikizin pre-period RMSE'si yüksek olabilir; başlamadan kalibrasyonu mutlaka kontrol et.
Pratik öneri
Türkiye'de orta-büyük markalar için çoğunlukla Yaklaşım 2 (cluster) en sağlıklı. 5-10 il yeterli istatistiksel güç verirken, sentetik kontrol için 70+ il referans olarak kalır. Yaklaşım 1, ürün ya da kampanya İstanbul-spesifik olduğunda makul.
// 05Güç hesabı (statistical power)
Test başlamadan önce şu soruyu cevaplaman gerek: "Eğer gerçek bir %X lift varsa, bunu istatistiksel olarak yakalayabilecek miyim?" Cevap üç parametreye bağlı:
- Beklenen lift — kanalın gerçekten ürettiği lift (genelde MMM tahminiyle başlar).
- Satış varyansı — günlük/haftalık satışın ne kadar oynak olduğu.
- Test süresi + bölge sayısı — gözlem örneklem büyüklüğü.
Pratik kural
Aylık reklam bütçesinin %20'si bir kanala ayrılıyor ve bu kanalın MMM tahmini ROI'si 3x ise; tipik 4 haftalık geo-lift testinin minimum tespit edilebilir lifti (MDE — minimum detectable effect) %5-15 civarındadır. Yani gerçek lift bunun altındaysa test "anlamlı sonuç çıkmadı" der; bu "lift yok" demek değildir, "yakalayacak gücüm yoktu" demektir.
Açık kaynak Meta GeoLift R paketinin NumberOfTestSitesGivenPower ve EffectGivenSitesAndTime fonksiyonları, geçmiş veriyle bu hesabı otomatik yapar. Tipik akış: 6 ay geçmiş satış verisini yükle → istenen güç (0.8) ve süre (4 hafta) gir → algoritma "minimum 8 il treatment, MDE %7" gibi öneri verir.
// 0610 maddelik kurulum yol haritası
Geo-Lift Testi Kurulum Adımları
- Test sorusunu netleştir — neyi test ediyorsun? "Google Search'ün 4 haftalık lift'i" gibi tek bir kanal/kampanya. Çok değişken karıştırma. 1 gün
- Geçmiş 6 aylık il-bazlı satış verisini topla — KPI (haftalık net gelir veya sipariş sayısı) × 81 il × 26 hafta. 2-3 gün
- Aracı seç — Meta GeoLift (R, en zengin) ya da Google CausalImpact (Python/R, daha basit). 1 gün
- Güç hesabı çalıştır — kaç il treatment, kaç hafta, MDE ne? Karar treatment grubu büyüklüğü olur. 1 gün
- Treatment + kontrol illeri seç — synthetic control algoritması en iyi eşleştirmeyi yapar. Pre-period RMSE düşük olmalı. 1 gün
- Reklam platformunda coğrafi yapılandırma — Google Ads / Meta'da treatment illerinde harcamayı +%50 artır (veya kontrolde kapat). Kampanya yapısını test sırasında değiştirme. 2-3 gün
- Pre-period: 2 hafta gözlem — yeni yapı canlıda, ama sayım başlamadı. Anormallik olursa testi durdur, yeniden başla. 2 hafta
- Treatment period: 4 hafta — saf etkinin biriktiği dönem. Bu süre boyunca operasyonel müdahale yapma; özellikle promosyon, fiyat değişikliği yapma. 4 hafta
- Wash-out: 1 hafta — tedaviyi kapat, etkinin sönümlenmesini gözlemle. Adstock uzun kanallarda (TV) wash-out 2-3 hafta tutulabilir. 1 hafta
- Analiz + aksiyon raporu — lift % cinsinden, $ cinsinden, p-value. ROI hesabı. Karar: kanalı büyüt / küçült / aynı tut. 3-5 gün
// 07Sonuç yorumlama: lift'ten aksiyona
Test bittiğinde elinde üç sayı olur: lift %, lift TL, p-value. Bunlar nasıl okunur:
Lift %
"Treatment grubunda satış, sentetik kontrole göre %18 daha yüksek." Bu kanalın o 4 haftalık dönemde yarattığı saf incremental etki. Eğer beklediğinden büyükse: kanalın yatırımını artırmaya değer. Daha küçükse: planını gözden geçir.
Lift TL
"Treatment grubunda 4 hafta içinde 850.000 TL ek satış." Bu rakam o dönemdeki ek harcamayla karşılaştırılır. Treatment grubunda harcama 200.000 TL artmış, ek satış 850.000 TL ise incremental ROAS = 4.25x. MMM'in tahmini 3.5x'di — geo-lift onun üstünde, demek ki MMM kanalı hafif underestimate ediyor. Yatırım artırılabilir.
p-value
"%5 anlamlılık eşiğinde p=0.03 — sonuç anlamlı." Genel kural: p < 0.05 sonucu güven veren bulgu olarak kabul et. p = 0.05 — 0.10 arası "yönelim var ama net değil"; daha uzun veya daha büyük güç ile tekrarlama önerilir. p > 0.10 → sonuç anlamsız, bu testten karar verme.
Aksiyon haritası
| Sonuç | Yorum | Aksiyon |
|---|---|---|
| Lift % yüksek + p < 0.05 | Kanal yüksek etkili | Bütçeyi büyüt; doygunluğa kadar artır |
| Lift % orta + p < 0.05 | Kanal sağlıklı çalışıyor | Aynı seviyede tut, optimizasyon yap |
| Lift % düşük + p < 0.05 | Kanal beklenenin altında | Bütçeyi küçült; başka kanala kaydır |
| Lift % herhangi + p > 0.10 | Anlamsız sonuç | Testi tekrarla (daha çok il / daha uzun süre) |
| Lift negatif + p < 0.05 | Reklam zarar veriyor olabilir | Acil olarak kreatif/targeting incele |
// 08Yaygın 5 hata
Hata 1: Test sırasında kampanyaya dokunmak
Sebep: Pazarlama ekibinin doğal eğilimi her gün CTR / CPA bakıp ayar yapmak. Test sırasında bu yapılırsa — bütçe değişikliği, kreatif değişikliği, audience genişletmesi — saf lift ölçümü bozulur. Çözüm: Test başlamadan önce ekibe yazılı freeze deklarasyonu ver. Anomali olsa bile 4 hafta dokunma.
Hata 2: Kontrol grubu kontaminasyonu
Sebep: Treatment ilinde gösterilen bir reklam kontrol ilinden de ulaşılabilir (ulusal TV, sınırı geçen Meta ad). Çözüm: Coğrafi olarak izole kanallar seç (Google Ads, Meta region targeting); ulusal kanalları (TV, OOH) geo-lift ile test etme — onlar için MMM daha uygun.
Hata 3: Yetersiz güç
Sebep: Çok küçük treatment grubu (1-2 il) veya çok kısa süre (1-2 hafta). Sonuç "p > 0.10" çıkar; ekip "kanal işe yaramıyor" diye yorumlar — yanlış. Çözüm: Test öncesi güç hesabı zorunlu. MDE'yi bil ve yorumlamada referans olarak kullan.
Hata 4: Sezonsallığı görmezden gelmek
Sebep: Test 4 haftalık dönemde Black Friday, Ramazan veya bayram tatili gibi büyük varyans kaynaklarına denk geldi. Çözüm: Test takvimi 6+ hafta önceden planla; büyük tatil dönemleriyle çakışmasın. Çakışıyorsa sezonsallığı sentetik kontrol modeline ek değişken olarak ekle.
Hata 5: Tek bir testten genelleme yapmak
Sebep: "Q1'de Google Search lift'i %18 çıktı, demek ki kanal harika." Bir testin sonucu o dönem o pazara özgüdür. Çözüm: Her 6-12 ayda bir tekrarla. Sonuçlar zaman içinde stabilse karar güvenilir; çok değişiyorsa ya pazar koşulu değişiyor ya da ürün/kreatif faktörü baskın.
// 09Sık sorulan sorular
Geo-lift için hangi araçları öneriyorsunuz?
Meta GeoLift (R paketi, açık kaynak) en zengin özelliklere sahip. Synthetic control optimizasyonu, güç hesabı, post-test analiz hepsi entegre. Google CausalImpact (R + Python) daha basit, tek treatment-tek kontrol senaryosu için iyi. Profesyonel kurulumlarda Geox ya da Conversant gibi ticari platformlar da var ama açık kaynak çoğu ihtiyaç için yeterli.
Test sonucu MMM tahmininden çok farklı çıkarsa ne yapmalı?
Genelde geo-lift'i daha güvenilir kabul et — deneysel, nedensel sonuç verir. Ama önce uyumsuzluğu sorgula: (1) güç hesabı yeterli mi? (2) kontamine olmuş bir kanal mı? (3) test döneminde bir dış olay var mı? Eğer bunların hepsi yeşilse MMM modelini geo-lift sonucuna kalibre et — ilgili kanalın katsayısını revize et.
Geo-lift testi ürün lansmanı için kullanılabilir mi?
Sınırlı. Ürün lansmanları yüksek varyans + yüksek halo etki üretir; sentetik kontrol pre-period'da bu deseni göremediği için doğru karşı-olgusal kuramaz. Ürün lansmanı için holdout test (kanal kapatma) veya A/B kreatif test daha uygun.
Türkiye'de hangi sektörler geo-lift için uygun?
E-ticaret (özellikle FMCG, moda, ev), restoran zincirleri, perakende, telekom, finans (kredi kartı kampanyaları), otomotiv. Ortak özellik: il bazında ölçülebilir satış, coğrafi varyasyon, yeterli hacim. SaaS ve B2B yazılım gibi coğrafi dağılımı homojen ürünlerde zorlanır.
Geo-lift testi yapmak için ne kadar bütçe gerekir?
Doğrudan araç maliyeti sıfır. Asıl maliyet operasyonel: (1) treatment grubunda harcamayı %30-50 artırma maliyeti (4 hafta × kanal bütçesi × artış oranı); (2) analiz işine veri analisti zamanı (10-15 saat). Tipik maliyet aylık reklam bütçesinin %5-10'u, geri dönüşü 30-90 günde net karar değeri.
Agentic AI geo-lift'i nasıl kullanır?
İki şekilde: (1) Otonom marketing agent'ları geo-lift sonucunu girdi olarak kullanır — "Google Search'ün lift'i %18, doygunluğa uzak, bütçeyi %20 artır" şeklinde aksiyon önerir; (2) Sürekli geo-lift takibi için bir agent test çalıştırır, sonucu okur, MMM modelini günceller. Yani geo-lift çıktısı agent'ın stratejik kararlarının ham verisidir.
Bu rehber agentic AI marketing platformu d-dat tarafından hazırlanmıştır. Geo-lift testi tasarımı, MMM kalibrasyonu veya operasyonel agent danışmanlığı için iletişime geç; performans denetimi için d-lens'i incele.
// ilgiliİlgili sözlük terimleri.
Bu rehberde geçen kavramların kısa tanımları için sözlüğe bakabilirsin:
Bütçeni deneyle doğrula.
Geo-lift testi tasarımı, MMM çapraz doğrulaması veya bütçe optimizasyonu için d-dat ekibiyle 30 dakikalık ücretsiz keşif görüşmesi planla.