InSight test sonuçlarınızı yorumlamak

Test sona erdiğinde, pazarlama eyleminizin hedef metriğiniz üzerinde nasıl bir etkiye sahip olduğunu görmek için InSight sonuçları sayfasına gidebilirsiniz. InSight sonuçları ekranında testiniz hakkında bu bilgileri görebilirsiniz:

Sonuçlara genel bakış.
Sonuçlarınızı yorumlamanıza yardımcı olacak ve sonraki adımlara dair öneriler sağlayacak uygulanabilir içgörüler.
Ana metriklerin detaylı bir dökümü.

Terimler sözlüğü

InSight sonuçları sayfasında ve bu sayfada test sonuçlarını açıklamak için kullanılan terimlerin tanımlarını aşağıda bulabilirsiniz.

Incremental Artış: Kampanyanız, hedef metriğiniz üzerinde, kampanya yayınlanmasaydı gerçekleşmeyecek olumlu bir etki yarattı.
Kayıp: Kampanyanız, hedef metriğiniz üzerinde, kampanya yayınlanmasaydı gerçekleşmeyecek olumsuz bir etki yarattı.
Organik kanibalizasyon: Pazarlama aksiyonu yapılmasaydı gerçekleşecek event'ler/kurulumlar. Organik kanibalizasyon verileri sadece Kampanya başlangıcı ya da Bütçe artışı ölçümlenirken kullanılabilir.
Incremental etki mutlak değeri: Aksiyonun tüm test periyodu boyunca metrik değer üzerindeki etkisi. Bu, aksiyonla gerçekleşen değer arasındaki günlük ortalama farkın, aksiyon olmaksızın tahmin edilen ortalama metrik değeriyle karşılaştırılmasıyla ölçülür. Mutlak değer, bu formül ile hesaplanır: average actual value - average predicted value.
Incremental etki yüzdesi: Aksiyonunuzun hedef metrik üzerindeki yüzdelik etkisi. Bu etki, aksiyonun gerçekleşmediği durumda tahmini metrik değer ile aksiyonun var olduğu gerçek değer arasındaki ortalama günlük farkın karşılaştırılmasıyla ölçülür.
MAPE: Ortalama mutlak yüzde hata (MAPE) değeri, hedef metriğinizin ön dönemdeki gerçek değerleri ile model tarafından üretilen öngörülen değerler arasındaki ortalama farkı ölçer. Bu değerler arasındaki fark yüzdesinin düşük olması, modelin daha doğru olduğunu gösterir. %10'un altındaki bir değer yüksek , %10'dan %20'ye kadar ortalama , %20 ve üzeri bir değer ise düşüktür .
P-value: P-değeri (Olasılık değeri), sonuçlarınızın şansa bağlı olma olasılığını temsil eder. Daha düşük P-değeri, pazarlama aksiyonunuzun hedef metriğinizi doğrudan etkileme olasılığının yüksek olduğunu belirtirken, yüksek P-değeri, sonuçlarınızın başka değişikliklerden kaynaklanma olasılığının yüksek olduğunu belirtir. 0,05'ten düşük değerler, ölçümlediğiniz aksiyonun önemli bir etkiye sahip olduğunu gösterir.

P-değeri 0,01
- 0,01'lik bir P değeri, gözlenen etkinin şans eseri ortaya çıkma olasılığının %1 olduğunu gösterir. Bu, pazarlama aksiyonunuzun önemli bir etki yarattığına dair güçlü bir kanıt olarak kabul edilir.
P-değeri 0,2
- 0,2'lik bir P değeri, gözlemlenen etkinin pazarlama aksiyonunuzdan ziyade rastgele dalgalanmalardan kaynaklanma olasılığının %20 olduğunu gösterir. Pazarlama aksiyonunuzun bir etkisi olmuş olabilir, ancak daha fazla veri veya analiz olmadan emin olmak için yeterince güçlü değildir.
P-value 0,5
- 0,5'lik bir P-değeri, gözlemlenen etkilerin şansa bağlı olma olasılığının %50 olduğunu gösterir ve pazarlama aksiyonunuzun hedef metriğiniz üzerinde önemli bir etkisi olduğuna dair bir kanıt olmadığını gösterir.

Gerçekleşen ve tahmin edilen sonuçlar

Sonuç ekranında Tüm trafik ve Organik trafik için sonuçları analiz edebilirsiniz. Bu iki görünüm arasında geçiş yapmak için Tüm ve Organik sekmelerini kullanabilirsiniz.

Sonuç ekranı aşağıdaki bilgileri gösterir:

Test Sonucu : Pazarlama eyleminin kampanyanız üzerindeki Olumlu , Karışık veya Olumsuz etkisi.
Aksiyon : Test için seçtiğiniz pazarlama eylemi.
Metrik : Ölçümlemeyi seçtiğiniz metrik.
Incremental etki : Seçtiğiniz ölçümleme periyodunda, InSight'ın olacağını tahmin ettiği şey ile gerçekte olan arasındaki fark.
MAPE : Ortalama Mutlak Yüzde Hatası değeri.
Model performansı : Modelin ne kadar güvenilir olduğu.
P-value : Aksiyonunuzun P-değeri.
Aksiyon önemi : değişikliğin InSight'ın tahminleri aralığında olup olmadığı (grafikteki mor alanla temsil edilir).
- Gerçek sonuçlar tahmin aralığının içinde kalıyorsa, sonuç önemsizdir.
- Sonuçlar tahmin aralığının dışında kalıyorsa, sonuç önemlidir.

Adjust, test sonucunu hesaplarken pazarlama eyleminizin Tüm ve Organik trafikte hedef metriğiniz üzerindeki etkisini ölçümler. Her sonucun nasıl hesaplandığını aşağıdaki tabloda bulabilirsiniz.

Pazarlama eylemi	Tüm trafik için metrik üzerindeki etki	Organik trafik için metrik üzerindeki etki	InSight sonucu
Kampanya başlatma	Artış	Artış	Pozitif
Kampanya başlatma	Artış	Kayıp	Karma
Kampanya başlatma	Kayıp	Artış	Karma
Kampanya başlatma	Kayıp	Kayıp	Negatif
Bütçede artış	Artış	Artış	Pozitif
Bütçede artış	Artış	Kayıp	Karma
Bütçede artış	Kayıp	Artış	Karma
Bütçede artış	Kayıp	Kayıp	Karma
Kampanya durdurma	Artış	Artış	Karma
Kampanya durdurma	Artış	Kayıp	Karma
Kampanya durdurma	Kayıp	Artış	Karma
Kampanya durdurma	Kayıp	Kayıp	Pozitif
Bütçede düşüş	Artış	Artış	Negatif
Bütçede düşüş	Artış	Kayıp	Karma
Bütçede düşüş	Kayıp	Artış	Karma
Bütçede düşüş	Kayıp	Kayıp	Pozitif

Uygulanabilir içgörüler

Test sonuçlarınızı değerlendirmenize yardımcı olmak için Adjust, uygulanabilir içgörüler sağlar. Test sonuçlarını yorumlamanıza yardımcı olmak için Adjust, pazarlama eylemlerinizi gerçekleştirdiğinizde nasıl bir sonucun ortaya çıktığına dair bilgiler sağlamanın yanı sıra, test sonuçlarını baz alarak bir sonraki adımlarınıza dair Öneriler sunar.

Örneğin, yeni kampanyanızın beklenen Tüm ve Organik trafikte incremental yükseliş sağlayıp sağlamadığını değerlendirmek için bir InSight testi yaptığınızı varsayalım.

InSight testinin sonucunda, pazarlama eylemlerinizi gerçekleştirdiğinizde nasıl bir etkiye sahip olduklarına dair ayrıntılı bilgileri görebilirsiniz. Örneğin, kampanyanın incremental etkisini değerlendirebilir ve Tüm ve Organik kurulumlardaki artışı, düşüşü veya organik kanibalizasyonun meydana gelip gelmediğini belirleyebilirsiniz. Bu bilgilerle kampanyanızın etkisini değerlendirebilirsiniz.

Ayrıca Adjust, test sonuçlarınızı baz alan Öneriler de sunar. Kampanyanız Tüm install'larda önemli bir artışa yol açtıysa, ancak aynı zamanda organik kanibalizasyona da neden olduysa Adjust, bu kampanyanın bütçesini artırmanızı ve aynı anda attribution pencerelerinizi kısaltmanızı önerebilir. Ayrıntılı sonuçları uygulanabilir önerilerle bir araya getirerek Adjust, bilinçli kararlar almanızı ve pazarlama stratejilerinizi etkili bir şekilde optimize etmenizi sağlar.

Gelişmiş veriler

Gelişmiş veriler kısmında InSight testinizle ilgili ana metriklerin bir dökümünü alabilirsiniz. Pazarlama eyleminizin kampanyanız üzerindeki etkisini tam olarak görmek için Tüm ve Organik trafiğin her ikisi için de artı ikonunu seçerek her metriğin pazarlama eyleminden Önceki ve Sonraki değerini görebilirsiniz. Bu farklılıklar, her trafik türünün altındaki Farklılıklar satırında özetlenir.

InSight, her test sonunda pazarlama eyleminizin hedef metrik üzerinde test periyodu içindeki Incremental etkinin bir özetini gösterir. Bu özet aşağıdaki metrikleri içerir:

Incremental etki mutlak değeri : Seçtiğiniz ölçümleme periyodunda, InSight'ın olacağını tahmin ettiği şey ile gerçekte olan arasındaki günlük ortalama fark.
Incremental etki yüzdesi : Seçtiğiniz ölçümleme periyodunda, InSight'ın olacağını tahmin ettiği şey ile gerçekte olan arasındaki günlük ortalama farkın yüzde ile ifadesi.

InSight'a özel bu metrikler, aynı zamanda Datascape ve Rapor Servisi API'da da kullanılabilir. Datascape metriklerinin tam listesi için Datascape metrikleri makalemize göz atabilirsiniz.

	Tanım	Formül	Metric API ID
Event başına ortalama revenue	Ortalama revenue, seçtiğiniz zaman periyodu içinde uygulamanızı install eden kullanıcılardan seçtiğiniz event başına elde edilir.	`Event'in toplam revenue'sü / event'in toplam tetiklenme sayısı`	`average_revenue_per_event`
Incremental revenue	Kontrol grubuyla karşılaştırıldığında elde edilen ekstra revenue	`(Gerçek incremental değer - ortalama incremental değer) * Event başına ortalama revenue`	`incremental_revenue`
Incremental ROAS	Reklam harcaması getirisi (ROAS), sadece bir cohort periyodu içindeki uygulama-içi revenue kullanılarak hesaplanır.	-	`incremental_roas`

Sonuçlarınızı yorumlamak

Bir InSight incrementality testi yürüttüğünüzde ve testin durumu Tamamlandı olarak güncellendiğinde testin sonucunu görebilirsiniz.

Pazarlama eylemi	Sonuç	Yorum	Öneri
Yeni bir kampanya başlatmak veya yeni bir ağ eklemek	Pozitif Tüm: Artış Organik: Artış	Kampanya iyi bir performans göstermeye devam etti ve bütçesi artırılabilir. Kampanya başlatılmasaydı bile gerçekleşecek olan toplam install'ları artırmanın yanı sıra, aynı zamanda organik install sayısını da artırdı.	Bu kampanyaya devam edin. Bu kampanyanın bütçesini artırın.
Bir kampanyanın veya ağın bütçesini artırmak.	Karışık Tüm: Artış Organik: Kayıp	Kampanya iyi bir performans göstermeye devam etti, ancak son tık attribution'ı nedeniyle bir miktar organik kanibalizasyon meydana geldi.	Bu kampanyanın bütçesini artırın, ancak attribution pencerelerini daraltın.
Mevcut bir kampanyayı durdurmak veya bir ağı kaldırmak	Pozitif Tüm: Artış Organik: Artış	Kampanya durdurulduktan sonra Tüm Install'lar ve Organik Install'ların ikisi de arttı ve bu durum, kampanyanın etkisiz olduğunu gösterdi.	Beklenen performansı göstermeyen bu kampanyanın durdurulması doğru bir karardı. Bu kampanyanın bütçesini başka bir kampanyada kullanmayı düşünün. Bütçenizi başka bir kampanyaya kaydırın.
Bir kampanyanın veya ağın bütçesini azaltmak	Negatif Tüm: Kayıp Organik: Kayıp	Bu kampanyanın bütçesi azaltıldığında, Tüm Install'lar düşerken Organik Install'lar arttı. Bu durum, bu kampanyanın install'ları genel olarak artıran başarılı bir kampanya olabileceğini gösteriyor.	Artış olup olmayacağını belirlemek için bu kampanyayı daha düşük bir bütçeyle test edin.