Просмотр результатов, предоставленных InSight
После завершения теста откройте страницу результатов, чтобы увидеть измеренные показатели влияния ваших маркетинговых действий на выбранную целевую метрику. Вы можете увидеть:
- Обзор результатов: четкий вывод об эффективности на основе данных теста.
- Данные анализа и рекомендации: указания, которые помогут вам интерпретировать результаты и определить дальнейшие шаги.
- Разбивка по метрикам: подробный обзор ключевых перформанс-метрик.
Как интерпретировать результаты
Adjust предоставляет практически применимую информацию, которая поможет вам понять, что произошло во время теста и что делать дальше.
На странице результатов отображается подробная информация об эффективности как для всех установок, так и для органических установок, что позволяет вам получить полное представление об инкрементном влиянии ваших действий. Результаты сгруппированы по разделам, в которых освещены следующие моменты:
- инкрементное влияние вашей маркетинговой акции;
- сравнительный анализ изменений для всех установок и органических установок;
- состояние органического роста: развитие или каннибализация;
- статистическая значимость результатов;
- практические следствия для будущих кампаний.
Пример
Вы завершили тестирование в InSight для оценки эффективности недавно запущенной кампании. На основе полученных результатов Adjust предоставляет персонализированные рекомендации для оптимизации процесса.
Если ваша рекламная кампания значительно увеличила количество всех установок, но также привела к органической каннибализации, Adjust может порекомендовать следующие меры:
- увеличение бюджета кампании для усиления инкрементного прироста;
- сокращение окон атрибуции с целью уменьшения каннибализации.
Благодаря сочетанию четких результатов и конкретных рекомендаций Adjust позволяет вам принимать более быстрые и уверенные решения, а также помогает постоянно совершенствовать вашу маркетинговую стратегию.
Панель «Приложение»
- Определяет ключевые аспекты теста на инкрементальность.
- Действие: маркетинговое действие, выбранное для теста.
- Кампания: название кампании, выбранной для теста.
- Страна: страна, для которой проводится тест.
- Канал: канал, выбранный для теста.
- После выполнения действия: период времени, в течение которого анализируется инкрементальность.
- Метрика: метрика, выбранная вами для измерения.
- Эффективность: насколько надежна модель.
- Значимость: насколько изменение попадает в пределы прогнозируемого диапазона.
- Если фактические результаты находятся в пределах прогнозируемого диапазона, то результат незначителен.
- Если результат выходит за пределы прогнозируемого диапазона, результат является значимым.
Реакция на действие
- Результаты теста: оказало ли маркетинговое действие положительное , смешанное или отрицательное влияние на кампанию.
- Подробные сведения о вашем действии и его влиянии.
- Рекомендации относительно дальнейших шагов, которые вы можете предпринять на основе результатов теста.
Adjust рассчитывает результат теста, измеряя влияние маркетингового действия на целевую метрику для всего трафика и для органического трафика. В таблице ниже показано, как рассчитывается каждый результат.
| Маркетинговое действие | Влияние на метрику для всего трафика | Влияние на метрику для органического трафика | Результат InSight |
|---|---|---|---|
| Начало кампании | Рост | Рост | Положительное |
| Начало кампании | Рост | Потери | Смешанное |
| Начало кампании | Потери | Рост | Смешанное |
| Начало кампании | Потери | Потери | Отрицательное |
| Увеличение бюджета | Рост | Рост | Положительное |
| Увеличение бюджета | Рост | Потери | Смешанное |
| Увеличение бюджета | Потери | Рост | Смешанное |
| Увеличение бюджета | Потери | Потери | Смешанное |
| Остановка кампании | Рост | Рост | Смешанное |
| Остановка кампании | Рост | Потери | Смешанное |
| Остановка кампании | Потери | Рост | Смешанное |
| Остановка кампании | Потери | Потери | Положительное |
| Уменьшение бюджета | Рост | Рост | Отрицательное |
| Уменьшение бюджета | Рост | Потери | Смешанное |
| Уменьшение бюджета | Потери | Рост | Смешанное |
| Уменьшение бюджета | Потери | Потери | Положительное |
Обзор результатов
Для каждого теста InSight отображает сводную информацию об инкрементном влиянии ваших маркетинговых действий на целевую метрику в течение тестового периода. Два верхних графика показывают среднесуточное инкрементное влияние, выраженное как в процентах, так и в абсолютном значении для всех установок и для органических установок. На графиках отображается сравнение среднесуточных фактических (сплошная линия) и прогнозируемых (пунктирная линия) значений.
Вот конкретные метрики, доступные для создания отчетов InSight:
| Определение | Формула | Идентификатор метрики API | |
|---|---|---|---|
| Средний доход на одно событие | Средний доход на выбранное событие, сгенерированный от пользователей, установивших ваше приложение в выбранный вами период времени | Общий доход события / количество срабатывания триггеров для события | average_revenue_per_event |
| Инкрементальный доход | Дополнительный сгенерированный доход в сравнении с контрольной группой | (Фактическое значение приращения – среднее значение приращения) * средний доход на одно событие | incremental_revenue |
| Инкрементальный ROAS | Возврат от рекламных расходов, рассчитанный с использованием только дохода в приложении за выбранный период когорты | - | incremental_roas |
Полный список метрик Datascape см. в разделе Метрики Datascape.
Инкрементное влияние с течением времени
Все установки с влиянием действия.
Органические установки с влиянием действия.
На графике показаны результаты до и после действия.
- Результаты после действия показывают диапазон прогнозирования и где находятся фактические и прогнозируемые установки.
Обратите внимание , что вы можете выбрать «Показывать только после окончания действия», чтобы сместить представление и изолировать точки данных после действия.
Расширенные данные
В разделе Расширенные данные показаны основные метрики, связанные с тестом InSight. Для всего и органического трафика вы можете нажать на значок плюса, чтобы отобразить значения каждой метрики до и после выбранного маркетингового действия для точного понимания того, какое влияние оказало маркетинговое действие на проводимую кампанию.
Если ваше действие представляет собой кампанию, вы увидите детализацию на уровне кампании со следующими метриками в порядке их применения:
- Установки (атрибуция)
- Установки (SKAN)
- Оплата за установку (все)
- Всего сессий
- Расходы на рекламу
Глоссарий терминов
Для описания результатов тестов на странице результатов используются приведенные далее термины.
Инкрементальный подъем
Кампания оказала положительное влияние на целевую метрику. Если бы кампания не была запущена, этого эффекта не было бы.
Потери
Кампания оказала негативное влияние на целевую метрику. Если бы кампания не была запущена, этого эффекта не было бы.
Органическая каннибализация (перебиванию)
События/установки, которые могли произойти без проведения маркетингового действия. Данные о каннибализации (перебивания) органического трафика доступны только при измерении показателей Запуск кампании или Увеличение бюджета .
Абсолютное значение инкрементного влияния
Влияние действия на значение метрики за весь период тестирования. Измеряется путем сравнения среднедневной разницы между фактическим значением с учетом действий и средним прогнозируемым значением метрики без учета действий. Абсолютное значение рассчитывается по следующей формуле: average actual value - average predicted value.
Процент инкрементного влияния
Влияние вашего действия на целевую метрику в процентах. Измеряется путем сравнения средней ежедневной разницы между прогнозным значением метрики без действия и текущим значением с действием.
MAPE (модель эффективности)
Значение средней абсолютной ошибки в процентах (MAPE) измеряет среднюю разницу между фактическими значениями целевой метрики в течение предварительного периода и прогнозируемыми значениями, полученными с помощью модели. Более низкий процент разницы между этими значениями указывает на более точную модель. Значение ниже 10 % является высоким , от 10 % до 20 % — средним , а выше 20 % — низким .
P-значение (значимость)
P-значение (значение вероятности) представляет собой вероятность того, что полученные результаты являются случайными. Более низкое P-значение указывает на большую вероятность того, что проводимые маркетинговые действия оказали непосредственное влияние на целевую метрику, в то время как более высокое P-значение указывает на большую вероятность того, что результаты были обусловлены другими изменениями. Значения менее 0,05 указывают на то, что проведенные действия оказали значительное влияние.
P-значение: 0,01
- P-значение, равное 0,01, указывает на 1%-ную вероятность того, что наблюдаемый эффект может возникнуть случайно. Такой результат считается убедительным доказательством того, что маркетинговые действия оказали значительное влияние.
P-значение: 0,2
- P-значение, равное 0,2, указывает на 20-процентную вероятность того, что наблюдаемый эффект может быть вызван случайными колебаниями, а не результатами маркетингового действия. Это свидетельствует о том, что маркетинговые действия могли оказать влияние, но доказательства недостаточно убедительны для достижения полной уверенности без получения дополнительных данных или проведения анализа.
P-значение: 0,5
- P-значение, равное 0,5, указывает на 50-процентную вероятность того, что наблюдаемый эффект может быть обусловлен случайностью. Таким образом, нет никаких доказательств того, что маркетинговые действия оказали значительное влияние на целевую метрику.