Tre typer eksperimenter, én editor med innebygd AI

Hele installasjonen er ett skript i head, og det er den eneste endringen på nettstedet ditt. Derfra bygger du en variant ved å peke på elementer på de live sidene dine. Det første eksperimentet venter derfor bare på at du bestemmer hva du vil teste, ikke på noe som må anskaffes, bygges eller planlegges. Ingenting går live ved et uhell mens du lærer deg verktøyet: et nytt eksperiment er et utkast til du starter det.

Hvert nettsted får sin egen kompilerte fil med eksperimentene bakt inn, så runtimen vet hva den skal kjøre når den lastes, og ingenting venter på et kall til oss før siden vises. Loaderen i siden din er på under 1 KB, og de tyngre funksjonene, som sidedata og datafeeder, lastes bare på nettsteder der testene bruker dem. Siden holdes kort tilbake mens endringene legges inn, så besøkende ikke ser originalen blinke før testvarianten kommer. Fire uavhengige kodeveier sørger for at siden vises igjen, så hvis noe feiler, får besøkende den uendrede siden og ikke en tom side. Sporingen lastes sist, etter at siden er synlig, så målingen aldri forsinker visningen.

Tekst, stil, layout og plassering endrer du ved å peke, inkludert hover- og fokustilstander, og hele seksjoner legger du til fra et bibliotek med komponenter som henter nettstedets egne skrifttyper og farger. En endring kan inneholde sidens egne data, for eksempel prisen på hvert produkt, eller verdier fra en feed du allerede publiserer, og en selektor kan bruke den på alle elementer som passer. Du kan også beskrive endringen med vanlige ord og la AI-editoren foreslå den, forhåndsvist på siden før noe lagres. Utover det er editoren ærlig på hvor den slutter: alt egenskapspanelet ikke dekker, skriver du som egendefinert CSS eller JavaScript på varianten, så en test stopper aldri på grunn av verktøyet. Den egentlige grensen er endringer som skjer før siden finnes: rangering, prislogikk, en anbefalingsmodell. Det er eksperimenter på serversiden, og de trenger utviklerne dine.

Så mange du har ideer til. Det er et svar som er verdt å sammenligne med det du bruker i dag. Hvert eksperiment randomiserer uavhengig, så en kvalifisert besøkende kommer inn i alle eksperimentene de kvalifiserer til, og hvert eksperiment måler mot hele det kvalifiserte publikummet. Flere tester samtidig deler ikke utvalget ditt her. Derfor sjekker plattformen om to tester kan forstyrre hverandre, og rasjonerer ikke hvor mange som får kjøre. Testtempo er ofte det som skiller et testprogram som lønner seg fra et som ikke gjør det.

Vinnere du har hardkodet, ligger allerede i din egen kodebase og påvirkes ikke. Det er nettopp dit implementeringskøen skal føre deg: den lister alle vinnere som fortsatt leveres av oss, og minner deg på dem til utviklerne dine har tid. Vinnere som fortsatt leveres av plattformen, stopper når plattformen stopper, som en hvilken som helst variant. Eksperimentene, hypotesene og den skriftlige historikken blir liggende i kontoen din, ikke i våre verktøy.