Monitoring
Pysäytys merkitsevyydellä
Lopettakaa aikaisin kun näyttö sen aidosti oikeuttaa, älkääkä koskaan kun se vain näyttää siltä.
Pysäyttäminen heti kun p alittaa 0,05 on oppikirjaesimerkki valikoivasta pysäyttämisestä. Toistuva kurkistelu ja pysäyttäminen ensimmäisellä ylityksellä paisuttaa väärän positiivisen osuuden kauas nimellisen viiden prosentin yli, ja automaattinen tarkistus kurkistaa joka ikinen minuutti, mikä on tästä pahin mahdollinen tapaus.
Siksi sääntö on varovainen. Automaattinen pysäytys vaatii että sekventiaalinen testi ja korjattu p-arvo ovat samaa mieltä, samasta variantista, samaan suuntaan. Sekventiaalinen testi pätee jatkuvan seurannan alla; korjattu p-arvo on lukuapuväline satunnaisesti katsovalle ihmiselle eikä pätevä pysäytyssääntö yksinään.
Tällä on tunnettu seuraus, jonka alusta valvoo piilottamisen sijaan. Sekventiaalinen testi on mitoitettu kiinteälle tavoitenousulle, joten testi jolla on todellinen mutta pienempi vaikutus jättää sen lukemaan ei vaikutusta samalla kun p-arvo lopulta lukee merkitsevää. Ne eivät koskaan ole samaa mieltä, mikään ei laukea, ja testi juoksee ajastettuun loppuunsa asti. Siksi ajastettu loppupäivä on pakollinen tämän asetuksen rinnalla: merkitsevyys saa vain koskaan päättää testin aikaisin, ei koskaan olla ainoa syy jonka takia se päättyy.
Kolme luottamusporttia seisoo koko polun edessä. Jakauma joka lakkasi täsmäämästä, kokonainen päivä ilman liikennettä, tai häiriö toisesta käynnissä olevasta testistä estävät kukin pysäytyksen, koska lukema johon se perustuisi ei olisi luotettava.