Pipelines de tests par étapes

Un pipeline est une suite ordonnée d’étapes, et une étape est un ensemble de tests qui tournent en même temps. C’est une séquence de groupes parallèles plutôt qu’un graphe général, car l’ordre et la combinaison sont exactement ce qu’un programme de CRO a besoin d’exprimer.

Les étapes sont le mécanisme d’exclusion, et c’est l’apport principal d’en construire un. Les tests qui entreraient en collision vont dans des étapes différentes et chacune tourne à plein trafic à son tour, plutôt que d’être rendus mutuellement exclusifs à l’exécution en partageant l’audience entre eux.

Chaque étape avance selon une règle que vous choisissez : quand chaque test qu’elle contient est conclu, ce qui est le défaut et la seule qui ne peut rien écourter ; quand le premier résultat concluant arrive, ce qui arrête le reste ; ou quand une personne le décide.

Deux réglages séparés gouvernent ce que le moteur peut faire de lui-même, car arrêter automatiquement le mauvais test et déployer automatiquement un perdant ne sont pas des erreurs comparables. Les deux sont désactivés par défaut, et avec l’automatisation désactivée, le moteur évalue quand même le tableau et journalise ce qu’il aurait fait. Cette simulation est la même fonction avec les mêmes entrées plutôt qu’un second chemin de code, ce qui en fait un aperçu honnête.