Cómo visualizar tus resultados de InSight
Cuando se termine de ejecutar tu prueba, abre la página de resultados para ver el impacto medible de tu acción de marketing en la métrica que elegiste como objetivo. Puedes ver lo siguiente:
- Resumen de resultados: un veredicto claro del rendimiento de la prueba
- Información y recomendaciones: orientación para ayudarte a interpretar los resultados y decidir cuáles son los siguientes pasos
- Desglose de métricas: una vista detallada de las métricas de rendimiento clave
Cómo interpretar tus resultados
Adjust te proporciona información práctica para ayudarte a entender lo que sucedió durante tu prueba y lo que puedes hacer a continuación.
La página de resultados desglosa el rendimiento de "Todas las instalaciones" y de las "Instalaciones orgánicas", con lo que te muestra un panorama completo del impacto incremental. Los resultados se organizan en secciones que resaltan lo siguiente:
- El efecto incremental de tu acción de marketing
- Los cambios en Todas las instalaciones , en comparación con las Instalaciones orgánicas
- Si el crecimiento orgánico se vio impulsado o canibalizado
- La importancia estadística de los resultados
- Las implicaciones prácticas para las campañas futuras
Ejemplo
Completaste una prueba de InSight para medir el impacto de una campaña recién iniciada. Con base en el resultado, Adjust te proporciona recomendaciones personalizadas para orientar la optimización.
Si tu campaña aumentó significativamente "Todas las instalaciones", pero también provocó una canibalización orgánica, nuestro sistema puede recomendarte que hagas lo siguiente:
- Aumentar el presupuesto de la campaña para amplificar las ganancias incrementales
- Acortar las ventanas de atribución para reducir la canibalización
Adjust combina resultados claros con recomendaciones concretas para ayudarte a tomar decisiones más rápidas con mayor confianza y a perfeccionar continuamente tu estrategia de marketing.
Barra de aplicación
- Identifica los aspectos clave de tu prueba de incrementalidad
- Acción: la acción de marketing que seleccionaste para la prueba
- Campaña: el nombre de la campaña seleccionada para la prueba
- País: el país para el que se ejecutó la prueba
- Canal: el canal seleccionado para la prueba
- Después de la acción: período durante el cual se analizó la incrementalidad
- Métrica: la métrica que elegiste para medir
- Rendimiento: el nivel de confiabilidad del modelo
- Importancia: posición del cambio en el rango de la predicción.
- Si el resultado real cae dentro del rango del pronóstico, se considera como no significativo.
- Si el resultado cae fuera del rango del pronóstico, se considera como significativo.
Respuesta de la acción
- El resultado de la prueba: indica si una acción de marketing tuvo un impacto positivo, mixto o negativo en tu campaña.
- Detalles relacionados con tu acción y su efecto.
- Recomendaciones sobre los siguientes pasos que puedes realizar con base en los resultados de la prueba
Nuestro sistema calcula el resultado de una prueba al medir el impacto de tu acción de marketing sobre la métrica que elegiste como objetivo para todo el tráfico y para el tráfico orgánico. La siguiente tabla muestra cómo se calcula cada resultado.
| Acción de marketing | Impacto en la métrica para todo el tráfico | Impacto en la métrica para el tráfico orgánico | Resultado de InSight |
|---|---|---|---|
| Inicio de la campaña | Aumento | Aumento | Positivo |
| Inicio de la campaña | Aumento | Pérdida | Mixto |
| Inicio de la campaña | Pérdida | Aumento | Mixto |
| Inicio de la campaña | Pérdida | Pérdida | Negativo |
| Aumento del presupuesto | Aumento | Aumento | Positivo |
| Aumento del presupuesto | Aumento | Pérdida | Mixto |
| Aumento del presupuesto | Pérdida | Aumento | Mixto |
| Aumento del presupuesto | Pérdida | Pérdida | Mixto |
| Detener campaña | Aumento | Aumento | Mixto |
| Detener campaña | Aumento | Pérdida | Mixto |
| Detener campaña | Pérdida | Aumento | Mixto |
| Detener campaña | Pérdida | Pérdida | Positivo |
| Disminución del presupuesto | Aumento | Aumento | Negativo |
| Disminución del presupuesto | Aumento | Pérdida | Mixto |
| Disminución del presupuesto | Pérdida | Aumento | Mixto |
| Disminución del presupuesto | Pérdida | Pérdida | Positivo |
Resumen de resultados
Para cada prueba, InSight muestra un resumen del efecto incremental que tuvo tu acción de marketing sobre la métrica que elegiste como objetivo durante el período de la prueba. Los primeros dos gráficos muestran el efecto incremental promedio diario, expresado como porcentaje y como valor absoluto, para todas las instalaciones y para las instalaciones orgánicas. Los gráficos muestran una comparación del promedio diario real (línea continua) y los valores pronosticados (línea punteada).
Estas son las métricas específicas disponibles para los informes de InSight:
| Definición | Fórmula | ID de API de la métrica | |
|---|---|---|---|
| Promedio de ingresos por evento | Promedio de ingresos generados por el evento seleccionado, entre los usuarios que instalaron tu aplicación, dentro del período seleccionado | Total revenue of event / number of times the event was triggered | average_revenue_per_event |
| Ingresos incrementales | Ingresos adicionales generados en comparación con un grupo de control | (Actual incremental value - mean incremental value) * Average revenue per event | incremental_revenue |
| ROAS incremental | Retorno del gasto en publicidad (ROAS), calculado únicamente con los ingresos in-app durante un período de cohorte seleccionado | - | incremental_roas |
Consulta el artículo sobre las métricas de Datascape para ver la lista de todas las métricas de Datascape.
Efecto incremental con el paso del tiempo
Todas las instalaciones con el efecto de la acción
Instalaciones orgánicas con el efecto de la acción
Gráfico que muestra los resultados antes y después de la acción
- Los resultados después de la acción muestran el rango de predicción y la posición de las instalaciones reales y pronosticadas dentro del mismo
Nota : puedes seleccionar "Mostrar únicamente después de la acción" para visualizar exclusivamente los puntos de datos que se presentaron después de la acción
Datos avanzados
La sección Datos avanzados muestra un desglose de las métricas clave relacionadas con tu prueba de InSight. Tanto para todo el tráfico como para el tráfico orgánico, puedes seleccionar el ícono + para mostrar los valores de cada métrica antes y después de que realizaras la acción de marketing que seleccionaste, lo que te permite determinar cuál fue su impacto exacto sobre tu campaña.
Si tu acción es una campaña, verás la granularidad a nivel de campaña con las siguientes métricas, según correspondan:
- Instalaciones (Atribución)
- Installs (SKAN)
- CPI (todos)
- Sesiones totales
- Gasto publicitario
Glosario de términos
Los siguientes términos se utilizan en la página de resultados para describir los resultados de las pruebas.
- Aumento incremental
- Tu campaña tuvo un efecto positivo en la métrica objetivo, el cual no se hubiera presentado si no hubieras ejecutado la campaña.
- Pérdida
- Tu campaña tuvo un efecto negativo en la métrica objetivo, el cual no se hubiera presentado si no hubieras ejecutado la campaña.
- Canibalización de actividades orgánicas
- Eventos/instalaciones que se hubieran presentado aunque no se hubiera realizado la acción de marketing. Los datos de canibalización orgánica únicamente están disponibles cuando mides el inicio de la campaña o el aumento del presupuesto.
- Valor absoluto del efecto incremental
- El efecto de tu acción sobre el valor de la métrica durante todo el período de testeo. Esto se mide al comparar el promedio diario de diferencia entre el valor real con la acción y el valor promedio pronosticado de la métrica sin la acción. El valor absoluto se calcula con la siguiente fórmula:
average actual value - average predicted value. - Porcentaje de efecto incremental
- El efecto de tu acción sobre la métrica objetivo en forma de porcentaje. Esto se mide al comparar el promedio diario de diferencia entre el valor pronosticado de la métrica sin la acción y el valor real con la acción.
- MAPE (rendimiento del modelo)
- El valor del error de porcentaje medio absoluto (MAPE) mide la diferencia promedio entre los valores reales de tu métrica objetivo durante el período previo y los valores pronosticados producidos por el modelo. Entre menor sea el porcentaje de diferencia entre estos valores, más preciso será el modelo. Si el valor es de menos del 10%, su nivel de precisión es alto; si es del 10 al 20%, su nivel de precisión es medio; y si es de más del 20%, su nivel de precisión es bajo.
- Valor p (significado)
- El valor p (valor de probabilidad) representa la probabilidad de que tus resultados se hayan presentado por casualidad. Si el valor p es menor, esto indica que existe una mayor probabilidad de que tu acción de marketing haya tenido un efecto directo en tu métrica objetivo, mientras que un valor p más alto indica que existe una mayor probabilidad de que tus resultados se hayan presentado a causa de otros cambios. Si el valor es menor que 0,05, esto indica que la acción medida tuvo un impacto significativo.
Valor p 0,01
- Si el valor p es de 0,01, esto indica que existe un 1% de probabilidad de que el efecto observado se pueda haber presentado por casualidad. Esto se considera como evidencia sólida de que tu acción de marketing tuvo un impacto significativo.
Valor p 0,2
- Si el valor p es de 0,2, esto indica que existe un 20% de probabilidad de que el efecto observado se pueda deber a algunas fluctuaciones aleatorias, en lugar de ser un efecto directo de tu acción de marketing. Esto sugiere que tu acción de marketing puede haber generado un impacto, pero la evidencia no es lo suficientemente sólida como para saberlo con seguridad, por lo que se necesitan más datos o análisis.
Valor p 0,5
- Si el valor p es de 0,5, esto indica que existe un 50% de probabilidad de que los efectos observados se hayan presentado por casualidad, lo que sugiere que no hay evidencia de que tu acción de marketing haya tenido ningún impacto significativo sobre la métrica objetivo.