Monitoring
Porte di affidabilità sui dati rotti
Tre condizioni in cui l’automazione si rifiuta di agire, perché la lettura su cui agirebbe non è credibile.
L’automazione vale solo quanto il numero che legge. Tre condizioni significano che il numero non si può leggere, e ciascuna blocca qualsiasi azione che si baserebbe su di esso.
Una ripartizione anomala del campione significa che il traffico non si è ripartito come configurato, quindi i due gruppi non sono confrontabili e nessun confronto fra loro regge. Nessun traffico per un giorno intero significa che non si sta misurando nulla. E una segnalazione di interferenza significa che un altro test attivo sta corrompendo questa lettura, che è quella che nient’altro intercetterebbe.
Quella terza porta è distinta dalla prima anziché inglobata in essa, perché le due non si sovrappongono come sembrerebbe. Un’interazione da redirect emerge sì come ripartizione anomala, ma due test che modificano lo stesso elemento producono una ripartizione perfetta e una combinazione di pagina che nessuno ha rivisto, che è invisibile al controllo sulla ripartizione del campione e comunque non è una lettura su cui valga agire.
Le porte di affidabilità proteggono solo il percorso della significatività. L’arresto a tempo è incondizionato, perché chiudere un test è sempre sicuro e lasciarne uno rotto a girare oltre la fine prevista fa due problemi di uno. Quando una porta blocca, il motivo è dichiarato a parole semplici anziché come codice di stato.