Tilastot jotka kestävät tarkastelun
Odotettu tappio
Mistä luopuisitte julkaisemalla tämän variantin, jos se ei osoittaudukaan parhaaksi. Usein juuri se luku joka ratkaisee päätöksen.
Merkitsevyys vastaa siihen, voitteko erottaa kaksi asiaa toisistaan. Odotettu tappio vastaa hyödyllisempään kysymykseen kun olette juuri toimimassa: jos valitsette tämän ja olette väärässä, kuinka paljon huonompi tilanne on.
Se lasketaan samasta posteriorien otannasta kuin todennäköisyys olla paras. Jokaiselle otokselle se mittaa kuinka paljon tämä variantti jäi parhaan haaran taakse, ja laskee sen keskiarvon yli kaikkien. Haara joka on yleensä paras ja vain hieman jäljessä silloin kun ei ole, saa pienen odotetun tappion.
Tämä on se joka tekee tasapeleistä ratkaistavissa olevia. Kaksi varianttia jotka on vaikea erottaa tilastollisesti ovat usein triviaaleja valita kaupallisesti, koska väärässä oleminen ei maksa lähes mitään. Viikkojen odottaminen merkitsevyyttä varten päätökselle joka on niin halpa on huono kauppa liikennettä varmuudesta.
Se leikkaa myös toiseen suuntaan. Suuri odotettu tappio variantilla joka näennäisesti johtaa on varoitus: nousupuoli on todellinen mutta laskupuoli ei ole pieni, ja tämä testi kannattaa ajaa pidempään.