Statistik som håller
Primära och sekundära mål
Ett mål avgör experimentet. Resten är sammanhang, och att bestämma i förväg vilket som är vilket är en stor del av det som håller ett testprogram ärligt.
På en webbplats markerar du vilka av de händelser den skickar som får vara mål. Nya händelser börjar som ignorerade: spårningsservern registrerar varje händelsenamn den ser, och ett aktivt val hindrar listan från att fyllas med allt som webbplatsen råkar skicka.
Från den listan väljer varje experiment ett primärt mål och listar det övriga du vill följa som sekundära. Utfallet beräknas mot det primära målet, det är det uppmärksamhetskön läser och det den automatiska stoppregeln agerar på. Allt annat finns för att fånga vinsten som kostade något på annat håll.
Det viktiga är att utse det primära målet innan experimentet startar. Därför tvingar plattformen dig att göra det och låter dig inte välja mått i efterhand. Den som väljer det mål som råkade röra sig samlar på sig vinster i sitt testprogram men ingen intäkt.
Bra att veta: om du i efterhand nedgraderar en händelse på webbplatsen påverkas inte experiment som redan har valt den. Ett avslutat resultat ska inte kunna ändras för att någon städade i en mappning månader senare.