Statistiek die u kunt verantwoorden
Verwacht verlies
Wat u zou opgeven door deze variant uit te leveren als hij niet de beste blijkt. Vaak het getal dat het besluit werkelijk beslecht.
Significantie beantwoordt of u twee dingen kunt onderscheiden. Verwacht verlies beantwoordt iets nuttigers op het moment dat u wilt handelen: als u deze kiest en u zit fout, hoeveel slechter bent u eraan toe.
Het wordt berekend uit dezelfde posteriorbemonstering als de kans op de beste. Voor elke trekking meet het hoe ver deze variant achterbleef bij de beste arm, en middelt dat over alle trekkingen. Een arm die meestal de beste is en slechts licht achterblijft wanneer dat niet zo is, heeft een klein verwacht verlies.
Dit is wat krappe beslissingen beslisbaar maakt. Twee varianten die statistisch moeilijk te scheiden zijn, zijn commercieel vaak triviaal om tussen te kiezen, omdat fout zitten bijna niets kost. Weken wachten op significantie voor een besluit dat zo goedkoop is, is een slechte ruil van verkeer voor zekerheid.
Het werkt ook de andere kant op. Een groot verwacht verlies op een variant die nominaal voorligt, is een waarschuwing: de bovenkant is echt, maar de onderkant is niet klein, en dit is een experiment dat het waard is om langer te laten lopen.