Umfragen in Experimenten

Eine Umfrage lässt sich mit einem der Experimente der Website verknüpfen, ausgewählt aus einer durchsuchbaren, nach Status gruppierten Liste. Nur Besucher, die in dieses Experiment eingeschrieben sind, sehen sie, und Sie können sie weiter auf bestimmte Varianten eingrenzen, sodass eine Frage zu einem neuen Checkout nur den Leuten gestellt wird, die den neuen Checkout gesehen haben.

Ein Experiment sagt Ihnen, dass Variante B besser konvertiert hat. Es kann Ihnen nicht sagen, warum, und das Warum entscheidet, was Sie als Nächstes testen. Dieselbe Frage je Variante zu lesen kann das meistens: Wenn der Arm, der besser konvertiert hat, auch beim Aufwand deutlich höher bewertet wird, haben Sie sowohl das Ergebnis als auch den Mechanismus dahinter.

Es funktioniert auch andersherum, und das ist der Fall, für den es sich zu planen lohnt. Eine Variante, die bei der Conversion gewinnt und bei der Zufriedenheit schlechter abschneidet, ist eine Warnung statt eines Gewinns, und für ein Experiment, das nur die Conversion-Rate liest, ist das völlig unsichtbar.

Der Builder spricht die Fälle offen an, in denen stillschweigend niemand gefragt würde. Verknüpfen Sie eine Umfrage mit einem Experiment im Entwurf, sagt er, dass niemand sie sieht, bis das Experiment startet; verknüpfen Sie sie mit einem beendeten, sagt er, dass sie überhaupt niemand sehen wird. Die Einschreibung ist die des Experiments selbst, sodass die Umfrage genau die Besucher fragt, die das Experiment zählt.