Valor p (p-value)
El valor p es la probabilidad de ver un resultado al menos tan extremo como el tuyo si en realidad no hubiera ningún efecto. Mientras más chico, más raro sería tu resultado sin efecto.
Selecciona cualquier frase de aquí para preguntarle a tu Maestro.
Un equipo corre 20 pruebas A/B en un año. En todas, el cambio de verdad no hace ninguna diferencia. Cuentan un éxito cada vez que p < 0.05. ¿Cuántos éxitos reportan, más o menos?
Qué es: el valor p mide qué tan sorprendentes serían tus datos si no hubiera ningún efecto real. Se usa en pruebas A/B, encuestas y estudios: un valor p chico dice que una diferencia así rara vez saldría por puro azar en tu muestra si no pasara nada.
Lo que no es: no es la probabilidad de que tu hipótesis sea cierta, ni la de que el resultado sea "pura suerte". Tampoco dice qué tan grande es el efecto: para eso está el intervalo de confianza.
Dónde falla: cuando revisas la prueba todos los días y la paras en cuanto se ve bien, o cuando corres muchas comparaciones y solo reportas las que salieron significativas.
Aprende a leer números con cuidado en el curso gratis Números que no mienten.
Así se usa
Cómo se lee
Prueba A/B: un botón de pago nuevo
- Versión A: 200 compras de 5,000 visitas (4.0%)
- Versión B: 230 compras de 5,000 visitas (4.6%)
- marcado: p = 0.14Si el botón no cambiara nada, una diferencia de 0.6 puntos o más, para cualquier lado, saldría el 14% de las veces.
- No queda abajo de 0.05: la prueba no distingue la diferencia de la suerteTampoco prueba que el botón no sirva.
Cuándo mirar más de cerca
Un valor p diminuto en una prueba enorme
10 millones de visitas por versión
- marcado: A: 4.00%, B: 4.03%. p = 0.0006
Con 10 millones de visitas por versión, una prueba da p = 0.0006. ¿La versión nueva es un gran éxito?
Pregúntale a tu Maestro sobre Valor p
Te responde desde la página gratis más cercana a esta palabra, igual que mientras estudias.
Tú: ¿Qué quiere decir "Valor p", en palabras sencillas?
Tu Maestro: Te lo explico con un caso tuyo, que se queda mejor que una definición. ¿Qué cambio en tu trabajo diste por bueno con una sola prueba?
Pregunta sobre: Responde desde la página "¿Un valor extremo es un error o un dato real?"
Solo este navegador guarda lo que preguntas aquí. ¿Cómo funciona?
Para saber más
Términos relacionados
- Intervalo de confianza
Un intervalo de confianza es el rango donde probablemente está el número de toda la población, sacado de una muestra: 52% ± 5 va de 47% a 57%.
- Población y muestra
La población es todo el grupo que quieres conocer; la muestra, la parte de ese grupo que sí mides para estimar al resto.
- Probabilidad
La probabilidad mide qué tan posible es que algo pase, de 0 (nunca) a 1 (seguro). Se calcula con casos favorables ÷ casos posibles: un 6 en un dado, 1/6.
- Muestreo
El muestreo es cómo escoges tu muestra. Sus tipos: aleatorio simple, sistemático (uno de cada tantos), estratificado (por grupos) y por conglomerados.