Cinco niveles de evidencia

Cada patrón de la página Aprendizajes lleva uno de cinco niveles de evidencia, y el nivel decide cómo habla de él la página. Los niveles se leen del intervalo ajustado del patrón en un orden fijo, y se muestra el primero que coincide.

Mixto va primero: tests de lo mismo en los que una variante sube con claridad y otra baja con claridad. Dos resultados que discrepan nunca se promedian en “sin efecto”, porque eso ocultaría lo más interesante que encontraron los tests. Consistente significa que el intervalo excluye el cero en tres o más tests. Señal temprana significa que lo excluye, pero con solo uno o dos.

Efecto pequeño significa que el intervalo incluye el cero y queda dentro del 2 % a cada lado, lo cual es un hallazgo en sí mismo: haga lo que haga este tipo de cambio, no hace mucho. Todo lo demás es todavía sin evidencia suficiente, que es la lectura honesta de la mayoría de los patrones en un programa joven.

La redacción sigue al intervalo además de al nivel, así que una señal temprana por debajo de cero se lee como un cambio que está perjudicando y no como una señal neutra. La página también indica cuántos patrones son concluyentes hasta ahora, para que quien lee vea de un vistazo en cuánto puede apoyarse ya el programa.