Sperimentazione
Assegnazione persistente delle varianti
Un visitatore che ha visto la variante B continua a vedere la variante B. Qualsiasi altra cosa è un’esperienza rotta e una misurazione corrotta.
L’assegnazione avviene una volta. La variante data a un visitatore è registrata nel suo browser, indicizzata per test, e riutilizzata su ogni pagina successiva e a ogni visita successiva da quel browser.
La persistenza è un requisito di correttezza prima di essere una gentilezza. Un visitatore riestratto a sorte a ogni visualizzazione di pagina vede una pagina che gli cambia sotto, e porta prove a entrambi i bracci contemporaneamente, il che rende il confronto privo di senso.
Il record è tenuto nella memoria del browser anziché in un cookie. Questo tiene la piattaforma fuori dal consenso sui cookie dando comunque a ogni visitatore un’esperienza stabile, ed è il motivo per cui lo script di tracciamento non imposta nulla.
L’archivio è ripulito mentre i test finiscono, così un visitatore di lunga data non accumula assegnazioni per test conclusi un anno prima. Le assegnazioni fatte da una versione precedente del runtime sono migrate in avanti anziché scartate, così i visitatori che ritornano mantengono la variante che stavano già vedendo.