Bayesianska resultat

Den bayesianska delen beskriver varje variants konverteringsgrad som en fördelning och inte som ett enskilt tal. Den utgår från en likformig prior, som inte förutsätter något alls, och uppdaterar den med det som har observerats. Av fördelningarna beräknas sannolikheten att varje variant är bäst av de testade, den förväntade kostnaden för att välja fel och ett kredibelt intervall per variant.

Den beräknas för varje experiment, så du behöver inte aktivera något separat läge. Båda delarna visas på samma skärm eftersom de svarar på olika frågor och du behöver båda: sannolikheten är lättare att agera på, p-värdet är lättare att försvara.

Sannolikheterna kommer från många dragningar ur posteriorerna, där vi räknar hur ofta varje variant hamnar överst. En detalj betyder mer än den verkar: slumpgeneratorn startas från själva datan, så samma antal ger alltid samma svar. Annars skulle sannolikheten flytta sig lite varje gång du laddar om sidan, och en siffra som ändras fast ingenting har hänt är en siffra ingen litar på.

Liksom den frekventistiska delen utgår den här från att besökaren antingen konverterar eller inte, och beräknas därför bara för konverteringar. Intäkt per session fungerar inte så, och konsolen markerar den som saknad och fyller inte i något värde.