Expérimentation

Transmission à l’implémentation

Une file de gagnants qui méritent d’être construits, modification jointe, si bien qu’en livrer un tient du copier-coller plutôt que d’une réunion.

Seulement de vrais gagnantsConversions et revenuSuivi jusqu’à terminé

Un gagnant qui ne part jamais en production ne vaut rien. La file d’implémentation est la liste des tests qui ont produit quelque chose qui mérite d’être construit, avec la variante, la modification et le résultat joints.

Ce qui la rend utile, c’est ce qu’elle refuse de lister. Une version antérieure traitait chaque test terminé sans déploiement comme du travail en attente, si bien que des variantes perdantes et des tests plats restaient dans la file comme si quelqu’un avait décidé de les construire. Les entrées doivent maintenant franchir les mêmes critères que le reste de la console : une direction, assez de trafic par branche, et un intervalle de gain qui reste d’un seul côté de zéro.

Elle lit les deux objectifs plutôt qu’un seul. Les conversions sont consultées en premier, car c’est l’objectif principal et son calcul ne comporte aucune approximation, puis le revenu en second, si bien qu’un test gagnant sur le revenu seul atteint quand même la file.

Chaque entrée suit son propre statut jusqu’à codé en dur, et un signal séparé signale les gagnants déployés qui sont encore servis par la plateforme des mois plus tard. C’est le cas qui mérite d’être attrapé : ça fonctionne, mais la modification a sa place dans votre base de code.

De meilleurs tests, de meilleures conversions

Test on all visitors with the world’s lightest script and make confident decisions powered by real-time reporting.