Corrección por comparaciones múltiples

Cada variante adicional es otra oportunidad para que el ruido parezca un ganador. Con cuatro comparaciones juzgadas al 0,05 cada una, la probabilidad de que al menos una cruce por suerte ronda el veinte por ciento, y el ganador que usted envía tiene tantas probabilidades de ser un artefacto como una mejora real.

Una corrección endurece el listón para compensarlo. Pertento ofrece tres, más ninguna, y aplicar una cambia solo el veredicto de significancia. El valor p, la puntuación z y los intervalos quedan intactos, así que cambiar de método nunca cambia la evidencia, solo el estándar con el que se la juzga.

Con una sola variante las cuatro se reducen al mismo umbral. En lugar de dejar que usted lo descubra probando cada opción, la consola lo dice de forma directa, y declara el umbral real que aplica el método elegido para su número de comparaciones.

Se fija una corrección en lugar de elegirla en cualquier sitio donde la plataforma actúa por su cuenta. La cola de atención, la cola de implementación y la regla de parada automática leen todas el mismo método, porque una cola no puede ofrecer un desplegable, y dos pantallas que discrepen sobre quién ganó es justo el fallo que esto evita.