Bayesiaanse resultaten

De bayesiaanse helft modelleert het conversiepercentage van elke variant als een verdeling in plaats van een punt, startend vanuit een uniforme prior die niets aanneemt, en werkt die bij met wat werkelijk is waargenomen. Uit die verdelingen rapporteert het de kans dat elke variant de beste is van de geteste varianten, de verwachte kosten van een verkeerde keuze, en een geloofwaardigheidsinterval per variant.

Het wordt voor elk experiment berekend, niet als een alternatieve modus waar u voor moet kiezen. Beide helften staan op hetzelfde scherm omdat ze verschillende vragen beantwoorden en mensen beide nodig hebben: de kans is makkelijker om naar te handelen, de p-waarde is makkelijker te verdedigen.

De kansen komen uit het vele malen bemonsteren van de posteriors en tellen hoe vaak elke variant er bovenuit komt. Eén detail telt meer dan het lijkt: de bemonstering wordt vanuit de data zelf gezaaid, zodat dezelfde aantallen altijd hetzelfde antwoord geven. Zonder dat zou de pagina verversen de kans elke keer een beetje verschuiven, en een getal dat verandert terwijl niets is veranderd, vertrouwt niemand.

Net als de frequentistische helft beschrijft dit een proces van converteren of niet-converteren, dus het wordt berekend voor conversies. Omzet per sessie is niet dat soort grootheid, en de console rapporteert die als afwezig in plaats van de kolom te vullen.