Pipelines van gefaseerde experimenten

Een pipeline is een geordende reeks fasen, en een fase is een set experimenten die tegelijk draait. Het is een opeenvolging van parallelle groepen in plaats van een algemene graaf, want volgorde en combinatie is precies wat een CRO-programma moet kunnen uitdrukken.

De fasen zijn het uitsluitingsmechanisme, en dat is het voornaamste wat zo een opzetten u oplevert. Experimenten die zouden botsen komen in verschillende fasen terecht en draaien elk op hun beurt op vol verkeer, in plaats van tijdens het draaien onderling uitsluitend te worden gemaakt en het publiek ertussen te splitsen.

Elke fase gaat verder op een regel die u kiest: wanneer elk experiment erin is afgerond, wat de standaard is en de enige die niets vroegtijdig kan afkappen; wanneer het eerste doorslaggevende resultaat binnenkomt, wat de rest stopt; of wanneer iemand het zegt.

Twee aparte schakelaars bepalen hoeveel de motor zelf mag doen, want een verkeerd experiment automatisch stoppen en een verliezer automatisch uitrollen zijn geen vergelijkbare fouten. Beide staan standaard uit, en met automatisering uit evalueert de motor het bord nog steeds en logt hij wat hij zou hebben gedaan. Die droogloop is dezelfde functie met dezelfde invoer in plaats van een tweede codepad, en dat is wat er een eerlijke voorvertoning van maakt.