Pipelines gestaffelter Experimente

Eine Pipeline ist ein geordneter Ablauf von Stufen, und eine Stufe ist eine Gruppe von Experimenten, die zur gleichen Zeit laufen. Das ist eine Folge paralleler Gruppen statt eines allgemeinen Graphen, denn Reihenfolge und Kombination sind genau das, was ein CRO-Programm ausdrücken muss.

Die Stufen sind der Ausschlussmechanismus, und das ist der Hauptgrund, eine Pipeline zu bauen. Experimente, die kollidieren würden, kommen in verschiedene Stufen, und jede läuft der Reihe nach mit vollem Traffic, statt sich zur Laufzeit gegenseitig auszuschließen und das Publikum zwischen ihnen aufzuteilen.

Jede Stufe schaltet nach einer von Ihnen gewählten Regel weiter: wenn jedes Experiment darin abgeschlossen ist, das ist der Standard und die einzige Regel, die nichts vorzeitig abbrechen kann; wenn das erste eindeutige Ergebnis eintrifft, was den Rest stoppt; oder wenn eine Person es so entscheidet.

Zwei getrennte Schalter regeln, wie viel die Engine allein tun darf, denn das falsche Experiment automatisch zu stoppen und automatisch einen Verlierer auszurollen sind keine vergleichbaren Fehler. Beide sind standardmäßig aus, und mit ausgeschalteter Automatisierung bewertet die Engine trotzdem das Board und protokolliert, was sie getan hätte. Dieser Probelauf ist dieselbe Funktion mit denselben Eingaben statt eines zweiten Codepfads, was ihn zu einer ehrlichen Vorschau macht.