Monitoring
Rilevamento delle interazioni
Il problema che emerge nel test sbagliato. Un redirect che porta traffico fuori da un altro test compare come allarme là, senza nulla che rimandi alla causa.
È il modo di fallire quasi impossibile da diagnosticare dall’interno del test che lo segnala. Un test con redirect che porta traffico fuori dal pubblico di un altro emerge come ripartizione anomala nell’altro test, dove nulla nei dati rimanda alla causa. Qualcuno passa un pomeriggio a indagare su un test che funziona correttamente.
Il rilevamento delle interazioni segnala la relazione anziché il sintomo. Nomina entrambi i test e su cosa stanno collidendo, così l’allarme arriva con la spiegazione allegata anziché come un mistero nel posto sbagliato.
Intercetta anche il caso che non produce alcun allarme. Due test che modificano lo stesso elemento mantengono una ripartizione perfetta del traffico, quindi il controllo sulla ripartizione del campione non vede nulla di anomalo, e ciò che i visitatori ottengono è una combinazione di pagina che nessuno dei due test intendeva. È per questo che l’interferenza è una porta di affidabilità distinta dal controllo sulla ripartizione anziché inglobata in esso.
La segnalazione blocca l’azione automatica sul test coinvolto per tutto il tempo in cui rimane. Il motivo è formulato una volta e riusato, così l’editor delle pipeline, il motore e la coda delle attenzioni dicono tutti la stessa frase sulla stessa coppia anziché tre formulazioni diverse.