Vragen over dit experiment

De meeste vragen over een test zijn dezelfde drie: is dit significant, kan ik het al vertrouwen, en wat doe ik nu? Elk experiment heeft in de header, op elk tabblad, een veld waarin u die vraag typt. Het antwoord verschijnt terwijl het wordt geschreven in een paneel naast de pagina, in de taal waarin u de vraag stelde, met eerst het antwoord en daarna de redenering.

Hij leest de cijfers die het tabblad Statistics toont, op dezelfde manier berekend, voor het doel, de valuta, de methode en de correctie die daar zijn gekozen: conversies, conversiepercentages en omzet per variant, significantie, de kans de beste te zijn en het verwachte verlies, de power-analyse en hoe lang de test nog nodig heeft, de controle van de verkeersverdeling en de secundaire doelen. Hij verzint nooit een cijfer en noemt een variant nooit een winnaar als de pagina dat niet doet. Hij leest ook de targeting, de varianten, de doelen en het schema van het experiment, de briefing en de debrief, die hij behandelt als de lezing van het resultaat door het team en niet als een meting.

Bij een concept helpt hij al voordat de test start: of de instellingen doen wat de briefing beoogt, of de hypothese een wijziging, een effect en een maatstaf noemt die dat effect kan aantonen, en wat de invoer van het looptijdplan inhoudt. Hij leest alleen. Hij start, stopt of bewerkt niets, en hij ziet de code van een variant niet, en ook geen afzonderlijke wijzigingen, schermafbeeldingen of het activiteitenlog. Tokens, sleutels en e-mailadressen in targetingregels en redirect-URL's worden afgeschermd voordat er iets wordt verstuurd.

Elk experiment heeft één gesprek, gedeeld door iedereen die het kan openen, leden inbegrepen, en bij elke vraag staat wie hem stelde. Is het resultaat veranderd sinds een antwoord werd gegeven, dan wordt dat antwoord als verouderd gemarkeerd. Gesprekken worden 12 maanden bewaard, en elk antwoord verbruikt AI-credits van het account dat eigenaar is van de website, met de kosten eronder vermeld.