Tilastot, jotka kestävät tarkastelun
Nousu ja luottamusvälit
Kaksi väliä, kaksi eri tehtävää. Kiistan ratkaisee jälkimmäinen.
Ensimmäinen väli koskee variantin omaa konversioprosenttia: aluetta, jolle sen todellinen prosentti todennäköisimmin osuu. Se on Wilsonin luottamusväli eikä naiivi väli, mikä tarkoittaa, että se pysyy nollan ja sadan prosentin välillä pienilläkin otoksilla, kun yksinkertaisempi laskenta ilmoittaisi kevyesti alarajan nollan alapuolelle.
Toinen väli ratkaisee asiat. Nousuväli on eron vaihteluväli kontrolliin nähden. Jos koko väli on nollan yläpuolella, variantti on aidosti edellä. Jos se ulottuu nollan molemmille puolille, "ei eroa" on yhä sopusoinnussa mittausten kanssa, näytti piste-estimaatti kuinka rohkaisevalta tahansa.
Tämä ero on syy siihen, että molemmat näytetään. Kaksi päällekkäistä varianttikohtaista väliä eivät kerro, onko niiden välinen ero todellinen, ja niiden lukeminen ikään kuin ne kertoisivat on yksi yleisimmistä tavoista julistaa testi päättyneeksi liian aikaisin.
Nousuväliä lukee myös muu alusta. Huomiojono nimeää voittajan vain, kun väli on kokonaan nollan samalla puolella, toteutusjono soveltaa samaa porttia, ja automaattinen pysäytys ei toimi ilman sitä. Yksi määritelmä sanalle "edellä", käytössä kaikkialla.