Monitoring
Alarmen bij te laat of geen data
De twee storingen die niemand opmerkt vanuit het resultatenscherm: een test die over zijn einde heen blijft draaien, en een test die stilletjes is gestopt met verzamelen.
Een experiment over tijd stond gepland om te eindigen en deed dat niet. Het draait nog, verdeelt nog verkeer, en kost u nog steeds het publiek dat het opslokt, meestal omdat het besluit dat het opleverde nooit is genomen. Het wordt gerangschikt als een besluit dat wacht en niet als een storing, want er is niets stuk en iemand hoeft alleen te beslissen.
Een experiment zonder data is het urgentere geval. Een volle dag niets vastleggen terwijl de test nog draait betekent bijna altijd dat een targetingregel niet meer aanslaat, of dat het snippet is meegenomen in een deploy. Vanuit het resultatenscherm oogt dit als een rustige week; van buitenaf is het een test die is opgehouden een test te zijn.
Beide bereiken u in plaats van te wachten tot iemand ze vindt. Beide staan standaard aan voor e-mail en Slack, samen met de scheve verdeling, want gezondheidssignalen verdienen een onderbreking op een manier die levenscyclusevents niet doen.
Een geen-data-melding blokkeert ook geautomatiseerd stoppen. Handelen op een conclusie uit een experiment dat is opgehouden te verzamelen, is precies waar de vertrouwenspoorten voor bestaan.