Monitoring
Sikring for minste kjøretid
Fjorten dager som standard, og aldri færre enn sju. Under en uke måler dere en tirsdag heller enn en virksomhet.
Trafikk er ikke det samme på en tirsdag som på en søndag, og det er heller ikke intensjon. Et eksperiment stoppet etter fire dager har målt akkurat de dagene det var, og effekten det rapporterer, overlever ikke møtet med en hel uke.
Derfor håndheves en minste kjøretid før en automatisert stopp ved signifikans er tillatt. Standarden er fjorten dager, som er to hele forretningssykluser, og den kan ikke settes under sju i det hele tatt. Det gulvet er en hard grense heller enn en advarsel, fordi argumentet for å gå under det alltid er det samme, og alltid feil.
Den styrer bare signifikansløpet. En planlagt sluttdato avslutter fortsatt eksperimentet når den inntreffer, og et menneske kan alltid stoppe ett for hånd. Sikringen finnes for å hindre automatisering fra å handle på en avlesning tatt for tidlig, ikke for å hindre dere fra å styre deres eget program.
Den sjekkes før porten for manglende trafikk, med hensikt. Et nylig startet eksperiment ser identisk ut med ett som ikke har registrert noe på et døgn, og å blokkere på den avlesningen er endelig, så å evaluere den før et eksperiment har fått sjansen til å motta trafikk, ville ødelagt hver eneste stopp-ved-signifikans-tidsplan innen ett minutt etter lansering.