Fase 6 de 6
Medir y aprender
¿Cuál es la siguiente prueba y qué resultado cambiaría la decisión?
Una prueba solo sirve si la regla de decisión se define antes de conocer el resultado. Este es un siguiente paso propuesto, no un experimento completado.
El trabajo · Pregunta, diseño, datos y regla de decisión
Ficha de la siguiente prueba
Una pregunta, un diseño y una regla. Así, el equipo puede detenerse o lanzar sin inventar otra interpretación a posteriori.
- Pregunta
- ¿Aumentará la finalización del cuestionario si la evidencia sobre las dosis aparece antes del paso del precio?Una pregunta sobre producto y creatividad, no sobre compra de medios.
- Diseño
- Probar con una prueba A/B el orden del cuestionario para el tráfico móvil pagado del Reino Unido; misma creatividad y audiencia.Asignación aleatoria; ventana de observación de siete días.
- Datos necesarios
- Asignación, quiz_start, quiz_complete y primera compra a nivel de recorrido.Recorridos conservados únicos, no totales de eventos sin procesar.
- Regla de decisión
- Lanzar si la finalización mejora al menos 5 puntos porcentuales sin reducir la tasa de primeras compras.Analizar solo cuando cierre la ventana de siete días. Si no se cumple la métrica de control, detener la implementación.
Por qué esta decisión
La atribución al último clic no puede demostrar un efecto incremental. Si el equipo necesita hacer una afirmación causal, necesita un diseño que la respalde, no una frase más contundente.
Siguiente paso
La ficha de prueba, los requisitos de datos y la persona responsable se incorporan al siguiente cambio de investigación o planificación.
Explorar más: Atribución frente a efecto incremental
Los resultados medidos describen recorridos conservados y compras atribuidas en este ejemplo sintético. No demuestran un aumento de notoriedad, el valor real del ciclo de vida del cliente ni un impacto incremental.
- Medido: finalización del cuestionario entre usuarios de medios pagados en móvil en dos grupos tras siete días de observación; compras iniciales atribuidas cuando los datos registrados lo permiten.
- No medido: cambio en notoriedad, valor real del ciclo de vida, economía total de adquisición ni incremento atribuible.
- La atribución al último clic asigna el mérito para poder conciliar los datos; no demuestra qué habría pasado sin la campaña.
- Para hacer una afirmación causal se necesita un grupo de control o una asignación aleatoria.
- Comprueba si el cambio de página mencionado afectó al recorrido móvil e investiga también la inquietud planteada por Soporte.
Referencia completa: Plan de medición y prueba desarrollado
Registrar de antemano la pregunta, la unidad de asignación, la métrica principal y la métrica de control. Fijar la ventana de observación antes del lanzamiento. Anotar las exclusiones y los datos faltantes. No añadir otra métrica de éxito tras ver el resultado. Publicar la decisión, incluso si se decide no continuar.