Drei Experimenttypen, ein visueller Editor

Ein Skript-Tag im Head ist die ganze Installation, und es ist die einzige Änderung an Ihrer Website. Von da an wird eine Variante gebaut, indem Sie auf Elemente Ihrer Live-Seiten zeigen, das erste Experiment ist also nur davon begrenzt, wie lange Sie brauchen, um zu entscheiden, was Sie testen wollen, und nicht von etwas, das beschafft, gebaut oder eingeplant werden muss. Während Sie sich einarbeiten, geht nichts versehentlich live: Ein neues Experiment bleibt ein Entwurf, bis Sie es starten.

Jede Website bekommt ihre eigene kompilierte Datei mit ihren Experimenten darin, sodass die Laufzeit beim Laden bereits weiß, was zu tun ist, und nichts auf einen Aufruf bei uns wartet, bevor die Seite rendert. Die Seite wird kurz zurückgehalten, während die Änderungen angewendet werden, und genau das verhindert, dass Besucher das Original in den Test hineinblitzen sehen; sichtbar gemacht wird sie aus vier unabhängigen Codepfaden, sodass ein Fehler die unveränderte Seite zeigt und keine leere. Das Tracking lädt zuletzt, nachdem die Seite sichtbar ist, sodass die Messung das Rendern nie verzögert.

Text, Gestaltung, Layout und Position werden durch Zeigen bearbeitet, und strukturelle Änderungen decken fünf HTML-Platzierungen an einem von Ihnen gewählten Element ab. Darüber hinaus hört er ehrlich auf statt schlecht: Was das Eigenschaftenfeld nicht ausdrücken kann, schreiben Sie als eigenes CSS oder JavaScript auf der Variante, sodass ein Test nie am Werkzeug scheitert. Die echte Grenze ist eine Änderung, die geschieht, bevor die Seite existiert: Ranking, Preislogik, ein Empfehlungsmodell. Das sind serverseitige Experimente, und dafür brauchen Sie Ihre Entwickler.

So viele, wie Sie Ideen haben, und diese Antwort lohnt den Vergleich mit dem, was Sie heute nutzen. Jedes Experiment randomisiert unabhängig, ein infrage kommender Besucher nimmt also an jedem Experiment teil, für das er qualifiziert ist, und jedes misst gegen das volle infrage kommende Publikum. Parallelität teilt hier Ihre Stichprobe nicht, und deshalb prüft die Plattform, ob zwei Tests einander stören würden, statt zu rationieren, wie viele laufen dürfen. Der Durchsatz ist meist der Unterschied zwischen einem Programm, das sich rechnet, und einem, das es nicht tut.

Gewinner, die Sie fest eingebaut haben, liegen bereits in Ihrer eigenen Codebasis und bleiben unberührt, und genau darauf will die Umsetzungsliste Sie stoßen: Sie führt jeden Gewinner auf, der noch von uns ausgeliefert wird, und weist so lange darauf hin, bis Ihre Entwickler Luft haben. Gewinner, die die Plattform noch ausliefert, stoppen, wenn sie stoppt, genauso wie jede Variante stoppt. Die Experimente, die Hypothesen und die schriftliche Historie bleiben im Konto und nicht in einem Werkzeug von uns.