Calculadora de Test A/B
Introduce visitantes y conversiones para tu control y variante para comprobar si la diferencia en tasa de conversión es estadísticamente significativa, o simplemente ruido.
Cómo se calcula la significancia del test A/B
Z = (p2 - p1) / sqrt(p_pool x (1 - p_pool) x (1/n1 + 1/n2))La calculadora utiliza una prueba Z de dos proporciones para determinar si la diferencia en tasas de conversión entre el control y la variante es probable que sea real o debida al azar.
Combina las tasas de conversión de ambos grupos para estimar la tasa de referencia, calcula el error estándar de la diferencia y divide la diferencia observada por ese error para obtener una puntuación Z. La puntuación Z se convierte en un p-valor: la probabilidad de ver una diferencia así de grande por azar si en realidad no hay ningún efecto.
Un p-valor inferior a 0,05 significa que hay menos de un 5% de probabilidad de que el resultado sea aleatorio: este es el umbral estándar de confianza del 95%. Por debajo del 0,10 se obtiene una confianza del 90%.
- Visitantes
- El número de usuarios expuestos a cada variante.
- Conversiones
- El número de objetivos completados en cada grupo.
- Uplift
- El cambio relativo en la tasa de conversión del control a la variante (positivo = gana la variante).
- Confianza
- Qué tan seguro puedes estar de que el resultado no es aleatorio. 95%+ es el umbral estándar para la mayoría de decisiones.