Statistik, die Sie vertreten können
Fragen zu diesem Experiment
Stellen Sie Ihre Frage in eigenen Worten und erhalten Sie eine Antwort zu diesem Experiment: ob das Ergebnis signifikant ist, wie weit Sie ihm trauen können und was als Nächstes zu tun ist.
Die meisten Fragen zu einem Test sind dieselben drei: Ist das signifikant, kann ich dem schon trauen, und was tue ich jetzt? Jedes Experiment hat in seinem Kopfbereich, auf jedem Tab, ein Feld, in das Sie genau diese Frage eintippen. Die Antwort erscheint, während sie geschrieben wird, in einem Panel neben der Seite, in der Sprache Ihrer Frage, zuerst die Antwort und dann die Begründung.
Er liest die Zahlen, die der Tab “Statistics” zeigt, auf dieselbe Weise berechnet, für das Ziel, die Währung, die Methode und die Korrektur, die dort gewählt sind: Conversions, Conversion-Raten und Umsatz je Variante, die Signifikanz, die Wahrscheinlichkeit, die beste Variante zu sein, und den erwarteten Verlust, die Power-Analyse und wie lange der Test noch braucht, die Prüfung der Traffic-Aufteilung und die Sekundärziele. Er erfindet nie eine Zahl und nennt eine Variante nie einen Gewinner, wenn die Seite es nicht tut. Außerdem liest er Targeting, Varianten, Ziele und Zeitplan des Experiments, sein Briefing und sein Debrief, das er als die Lesart des Teams zum Ergebnis behandelt und nicht als Messung.
Bei einem Entwurf hilft er schon vor dem Start des Tests: ob die Einstellungen tun, was das Briefing beabsichtigt, ob die Hypothese eine Änderung, einen Effekt und eine Messgröße nennt, die ihn zeigen kann, und was aus den Eingaben im Laufzeitplan folgt. Er liest nur. Er startet, stoppt oder bearbeitet nichts, und er sieht weder den Code einer Variante noch einzelne Änderungen, Screenshots oder das Aktivitätsprotokoll. Tokens, Schlüssel und E-Mail-Adressen in Targeting-Regeln und Weiterleitungs-URLs werden maskiert, bevor überhaupt etwas gesendet wird.
Jedes Experiment hat eine einzige Unterhaltung, die alle teilen, die es öffnen können, Mitglieder eingeschlossen, und bei jeder Frage steht, wer sie gestellt hat. Hat sich das Ergebnis geändert, seit eine Antwort gegeben wurde, wird diese Antwort als veraltet markiert. Unterhaltungen werden 12 Monate aufbewahrt, und jede Antwort verbraucht KI-Credits des Kontos, dem die Website gehört, wobei die Kosten jeweils darunter stehen.