Questions sur ce test

La plupart des questions sur un test sont toujours les trois mêmes : est-ce significatif, puis-je déjà m’y fier, et que dois-je faire maintenant ? Chaque test a, dans son en-tête et sur chaque onglet, un champ où vous tapez cette question. La réponse s’affiche au fil de sa rédaction dans un panneau à côté de la page, dans la langue de votre question, avec d’abord la réponse, puis le raisonnement.

Il lit les chiffres affichés par l’onglet Statistics, calculés de la même façon, pour l’objectif, la devise, la méthode et la correction choisis à cet endroit : conversions, taux de conversion et revenu par variante, significativité, probabilité d’être la meilleure et perte espérée, analyse de puissance et durée encore nécessaire au test, contrôle de la répartition du trafic et objectifs secondaires. Il n’invente jamais un chiffre et ne déclare jamais une variante gagnante quand la page ne le fait pas. Il lit aussi le ciblage, les variantes, les objectifs et la planification du test, son brief et son bilan, qu’il traite comme la lecture du résultat par l’équipe et non comme une mesure.

Sur un brouillon, il aide avant même le lancement du test : il vérifie si les réglages font ce que prévoit le brief, si l’hypothèse nomme un changement, un effet et une mesure capable de le montrer, et ce qu’impliquent les données saisies dans le plan de durée du test. Il se contente de lire. Il ne démarre, n’arrête ni ne modifie rien, et il ne voit ni le code d’une variante, ni les modifications une à une, ni les captures d’écran, ni le journal d’activité. Les jetons, les clés et les adresses e-mail présents dans les règles de ciblage et les URL de redirection sont masqués avant tout envoi.

Chaque test a une seule discussion, partagée par toutes les personnes qui peuvent l’ouvrir, membres compris, et chaque question indique qui l’a posée. Si le résultat a changé depuis qu’une réponse a été donnée, cette réponse est signalée comme obsolète. Les discussions sont conservées 12 mois, et chaque réponse consomme des crédits IA du compte propriétaire du site, avec son coût affiché en dessous.