Stimme der Kunden
Umfragen in Experimenten
Der Grund, warum das eine Plattform ist statt zweier Werkzeuge: Die Zahl sagt, was passiert ist, die Antworten sagen, warum.
Eine Umfrage, die läuft, während ein Experiment live ist, zeichnet auf, in welcher Variante welches Experiments jeder Antwortende war. Genau diese eine Tatsache macht aus zwei getrennten Werkzeugen ein nützliches.
Ein Experiment sagt Ihnen, dass Variante B besser konvertiert hat. Es kann Ihnen nicht sagen, warum, und das Warum entscheidet, was Sie als Nächstes testen. Dieselbe Frage je Variante zu lesen kann das meistens: Wenn der Arm, der besser konvertiert hat, auch beim Aufwand deutlich höher bewertet wird, haben Sie sowohl das Ergebnis als auch den Mechanismus dahinter.
Es funktioniert auch andersherum, und das ist der Fall, für den es sich zu planen lohnt. Eine Variante, die bei der Conversion gewinnt und bei der Zufriedenheit schlechter abschneidet, ist eine Warnung statt eines Gewinns, und für ein Experiment, das nur die Conversion-Rate liest, ist das völlig unsichtbar.
Die Zuordnung wird im Moment des Antwortens erfasst statt später abgeleitet, und die Auswertung zählt nur Antwortende, die tatsächlich in das Experiment eingeschrieben waren, nach dem Sie fragen. Wer nie daran teilgenommen hat, landet nicht still in einem Eimer.