Des statistiques défendables
Objectifs principaux et secondaires
Un seul objectif décide du test. Le reste est du contexte, et dire lequel est lequel dès le départ est l’essentiel de ce qui garde un programme honnête.
Un site marque lesquels des événements qu’il émet ont le droit de servir d’objectifs. Les événements nouvellement découverts démarrent ignorés, car le serveur de tracking enregistre chaque nom d’événement qu’il voit, et c’est cette adhésion explicite qui empêche la liste de se remplir de tout ce que le site déclenche.
Dans cet ensemble, chaque test choisit un objectif principal et retient tout ce qu’il veut surveiller d’autre comme secondaire. Le principal est ce contre quoi le verdict est calculé, ce que lit la file d’attention, et ce sur quoi agit la règle d’arrêt automatisé. Tout le reste sert à attraper la victoire qui vous a coûté quelque chose ailleurs.
Nommer le principal avant que le test ne démarre est la partie qui compte, et c’est pourquoi la plateforme vous y oblige plutôt que de vous laisser choisir une métrique après coup. Choisir l’objectif qui se trouve avoir bougé, c’est ainsi qu’un programme accumule des victoires et aucun revenu.
Une subtilité à connaître : rétrograder un événement sur le site par la suite ne change pas les tests qui l’avaient déjà choisi. Un résultat terminé ne doit pas changer rétroactivement parce que quelqu’un a rangé une correspondance des mois plus tard.