Bayesianske resultater

Den bayesianske halvdelen modellerer hver variants konverteringsrate som en fordeling heller enn et punkt, og starter fra en uniform prior som ikke antar noe, og oppdaterer den med det som faktisk er observert. Fra disse fordelingene rapporterer den sannsynligheten for at hver variant er den beste av dem som er testet, den forventede kostnaden ved å velge feil, og et troverdighetsintervall per variant.

Den regnes ut for hvert eksperiment, ikke som en alternativ modus dere må velge inn. Begge halvdeler er på samme skjerm fordi de svarer på ulike spørsmål og folk trenger begge: sannsynligheten er lettere å handle på, p-verdien er lettere å forsvare.

Sannsynlighetene kommer fra å sample posteriorene mange ganger og telle hvor ofte hver variant kommer ut foran. Én detalj betyr mer enn den ser ut til: samplingen er frøsatt fra selve dataene, så de samme tellingene gir alltid samme svar. Uten det ville en oppdatering av siden flytte sannsynligheten litt hver gang, og et tall som endrer seg når ingenting har endret seg, er et tall ingen stoler på.

Som den frekventistiske halvdelen beskriver dette en konverterte-eller-konverterte-ikke-prosess, så den regnes ut for konverteringer. Inntekt per sesjon er ikke den typen størrelse, og konsollen rapporterer den som fraværende heller enn å fylle kolonnen med et anslag.