Cómo interpretar los resultados de tus pruebas de InSight

Cuando se termine de ejecutar tu prueba, puedes dirigirte a la página de resultados al hacer clic en la prueba, en la página donde aparece la lista de todas las pruebas. La página de resultados te mostrará el efecto de tu acción de marketing sobre la métrica que elegiste como objetivo, incluyendo la siguiente información sobre tu prueba:

• Un resumen de los resultados.
• Información que te ayuda a interpretar los resultados y te brinda sugerencias para los siguientes pasos.
• Un desglose granular de las métricas clave.

En Adjust, te proporcionamos información práctica para ayudarte a entender los resultados de tus pruebas. Después de cada prueba, nuestro sistema te muestra una serie de detalles sobre el efecto de tu acción de marketing a fin de ayudarte a interpretar los resultados de tu prueba, así como algunas recomendaciones que te brindan asesoría práctica sobre lo que debes hacer a continuación con base en los resultados.

Por ejemplo, digamos que ejecutaste una prueba de InSight para evaluar el impacto de una campaña que acabas de lanzar y determinar si generó el aumento incremental deseado en todo el tráfico y en el tráfico orgánico.

En tu prueba de InSight, puedes ver la información detallada sobre lo que ocurrió cuando realizaste tus acciones de marketing. Por ejemplo, puedes evaluar el efecto incremental de la campaña y determinar si todas las instalaciones y las instalaciones orgánicas aumentaron o disminuyeron, o si se presentó una canibalización orgánica. Esta información te ayuda a evaluar la efectividad de tus campañas.

Además, nuestro sistema te ofrece recomendaciones basadas en los resultados de la prueba. Si tu campaña generó un aumento significativo en todas las instalaciones, pero también provocó una canibalización orgánica, nuestro sistema podría sugerir que aumentes tu presupuesto para esta campaña y reduzcas al mismo tiempo tus ventanas de atribución. Al combinar los resultados detallados con las recomendaciones prácticas, en Adjust te ayudamos a tomar decisiones mejor informadas y a perfeccionar tus estrategias de marketing de manera efectiva.

Glosario de términos

Los siguientes términos se utilizan en la página de resultados para describir los resultados de las pruebas.

Aumento incremental

Tu campaña tuvo un efecto positivo en la métrica objetivo, el cual no se hubiera presentado si no hubieras ejecutado la campaña.

Pérdida

Tu campaña tuvo un efecto negativo en la métrica objetivo, el cual no se hubiera presentado si no hubieras ejecutado la campaña.

Canibalización de actividades orgánicas

Eventos/instalaciones que se hubieran presentado aunque no se hubiera realizado la acción de marketing. Los datos de canibalización orgánica únicamente están disponibles cuando mides el inicio de la campaña o el aumento del presupuesto.

Valor absoluto del efecto incremental

El efecto de tu acción sobre el valor de la métrica durante todo el período de testeo. Esto se mide al comparar el promedio diario de diferencia entre el valor real con la acción y el valor promedio pronosticado de la métrica sin la acción. El valor absoluto se calcula con la siguiente fórmula: average actual value - average predicted value.

Porcentaje de efecto incremental

El efecto de tu acción sobre la métrica objetivo en forma de porcentaje. Esto se mide al comparar el promedio diario de diferencia entre el valor pronosticado de la métrica sin la acción y el valor real con la acción.

MAPE (rendimiento del modelo)

El valor del error de porcentaje medio absoluto (MAPE) mide la diferencia promedio entre los valores reales de tu métrica objetivo durante el período previo y los valores pronosticados producidos por el modelo. Entre menor sea el porcentaje de diferencia entre estos valores, más preciso será el modelo. Si el valor es de menos del 10%, su nivel de precisión es alto; si es del 10 al 20%, su nivel de precisión es medio; y si es de más del 20%, su nivel de precisión es bajo.

Valor p (significado)

El valor p (valor de probabilidad) representa la probabilidad de que tus resultados se hayan presentado por casualidad. Si el valor p es menor, esto indica que existe una mayor probabilidad de que tu acción de marketing haya tenido un efecto directo en tu métrica objetivo, mientras que un valor p más alto indica que existe una mayor probabilidad de que tus resultados se hayan presentado a causa de otros cambios. Si el valor es menor que 0,05, esto indica que la acción medida tuvo un impacto significativo.

• Valor p 0,01

  • Si el valor p es de 0,01, esto indica que existe un 1% de probabilidad de que el efecto observado se pueda haber presentado por casualidad. Esto se considera como evidencia sólida de que tu acción de marketing tuvo un impacto significativo.

• Valor p 0,2

  • Si el valor p es de 0,2, esto indica que existe un 20% de probabilidad de que el efecto observado se pueda deber a algunas fluctuaciones aleatorias, en lugar de ser un efecto directo de tu acción de marketing. Esto sugiere que tu acción de marketing puede haber generado un impacto, pero la evidencia no es lo suficientemente sólida como para saberlo con seguridad, por lo que se necesitan más datos o análisis.

• Valor p 0,5

  • Si el valor p es de 0,5, esto indica que existe un 50% de probabilidad de que los efectos observados se hayan presentado por casualidad, lo que sugiere que no hay evidencia de que tu acción de marketing haya tenido ningún impacto significativo sobre la métrica objetivo.

Información práctica

La página de resultados te permite analizar los resultados relacionados con todas las instalaciones y las instalaciones orgánicas , e incluye cinco secciones que resaltan todos los aspectos de tus pruebas de incrementalidad y te proporcionan información práctica.

Barra de aplicación

• Identifica los aspectos clave de tu prueba de incrementalidad
  • Acción: la acción de marketing que seleccionaste para la prueba
  • Campaña: el nombre de la campaña seleccionada para la prueba
  • País: el país para el que se ejecutó la prueba
  • Canal: el canal seleccionado para la prueba
  • Después de la acción: período durante el cual se analizó la incrementalidad
  • Métrica: la métrica que elegiste para medir
  • Rendimiento: el nivel de confiabilidad del modelo
  • Importancia: posición del cambio en el rango de la predicción.
    • Si el resultado real cae dentro del rango del pronóstico, se considera como no significativo.
    • Si el resultado cae fuera del rango del pronóstico, se considera como significativo.

Respuesta de la acción

• El resultado de la prueba: indica si una acción de marketing tuvo un impacto positivo, mixto o negativo en tu campaña.
• Detalles relacionados con tu acción y su efecto.
• Recomendaciones sobre los siguientes pasos que puedes realizar con base en los resultados de la prueba

Nuestro sistema calcula el resultado de una prueba al medir el impacto de tu acción de marketing sobre la métrica que elegiste como objetivo para todo el tráfico y para el tráfico orgánico. La siguiente tabla muestra cómo se calcula cada resultado.

Efecto incremental

• Los primeros dos gráficos muestran el efecto incremental promedio diario, expresado como porcentaje y como valor absoluto, para todas las instalaciones y para las instalaciones orgánicas
  • El gráfico muestra una comparación del promedio diario real (línea continua) y los valores pronosticados (línea punteada).

Para cada prueba, InSight muestra un resumen del efecto incremental que tuvo tu acción de marketing sobre la métrica que elegiste como objetivo durante el período de la prueba. Esta información aparece resumida en las siguientes métricas:

Las siguientes métricas específicas de InSight también están disponibles en Datascape y en la API del servicio de informes. Consulta el artículo sobre las métricas de Datascape para ver la lista de todas las métricas de Datascape.

Efecto incremental con el paso del tiempo

• Todas las instalaciones con el efecto de la acción

• Instalaciones orgánicas con el efecto de la acción

• Gráfico que muestra los resultados antes y después de la acción

  • Los resultados después de la acción muestran el rango de predicción y la posición de las instalaciones reales y pronosticadas dentro del mismo

• Nota : puedes seleccionar "Mostrar únicamente después de la acción" para visualizar exclusivamente los puntos de datos que se presentaron después de la acción

Datos avanzados

La sección Datos avanzados muestra un desglose de las métricas clave relacionadas con tu prueba de InSight. Tanto para todo el tráfico como para el tráfico orgánico, puedes seleccionar el ícono + para mostrar los valores de cada métrica antes y después de que realizaras la acción de marketing que seleccionaste, lo que te permite determinar cuál fue su impacto exacto sobre tu campaña.

Si tu acción es una campaña, verás la granularidad a nivel de campaña con las siguientes métricas, según correspondan:

1. Instalaciones (Atribución)
2. Installs (SKAN)
3. CPI (todos)
4. Sesiones totales
5. Gasto publicitario