Testien valvonta ja automaatio

Teille kerrotaan, eikä teidän tarvitse huomata sitä luvuista viikkoja myöhemmin. Ne kaksi vikaa, joita ei näe tulosnäytöltä, ovat jakauma, joka lakkasi vastaamasta asetuksianne, ja testi, joka lakkasi hiljaa kirjaamasta mitään, yleensä siksi, että julkaisu vei skriptin mukanaan tai kohdennussääntö lakkasi täsmäämästä. Kumpikin lähettää oletuksena hälytyksen sähköpostiin ja Slackiin, merkitsee jokaisen kyseisen testin tuloksen epäluotettavaksi ja estää alustaa toimimasta sen perusteella. Teitä odottava työ on järjestetty jono eikä sekasotku, ja se johdetaan siitä, mikä on juuri nyt totta, joten mikään ei katoa siksi, että joku kuittasi ilmoituksen.

Ei mitään, kunnes kytkette sen päälle, ja sen jälkeenkin vähemmän kuin ehkä odotatte. Automaatio ja voittajan automaattinen julkaisu ovat eri kytkimiä, ja molemmat ovat aluksi pois päältä, koska väärän testin automaattinen pysäytys maksaa sen liikenteen, joka on jo käytetty, kun taas häviäjän automaattinen julkaisu muuttaa sen, mitä jokainen kävijä näkee. Ennen kuin se toimii, sen on läpäistävä kolme luottamusporttia ja vähimmäisajoaika. Ja kun automaatio on pois päältä, se arvioi silti kaiken ja kirjaa, mitä se olisi tehnyt, samalla koodilla, joka sen olisi tehnyt, joten voitte seurata kuukauden ajan, onko se oikeassa, ennen kuin annatte sen toimia.

Jäsenillä on lukuoikeus koko alustaan: he näkevät jokaisen testin ja jokaisen tuloksen eivätkä voi muuttaa niistä mitään. Sääntöä valvotaan kerran ja keskitetysti eikä näyttö kerrallaan, ja sillä on väliä, koska näyttökohtaisesti sovelletussa oikeusmallissa seuraavaksi rakennettu näyttö jää helposti poikkeukseksi. Käynnistys, pysäytys ja julkaisu jäävät ylläpitäjille ja omistajille, ja jokainen merkityksellinen muutos kirjataan testille nimen ja ajan kanssa.

Valvonta on rakennettu juuri sellaista tilannetta varten. Kaikki ratkaisematon kaikilta tileiltä, joihin teillä on pääsy, kootaan yhteen näkymään asiakkaan ja sivuston mukaan ryhmiteltynä ja niin järjestettynä, että epäluotettava tulos tulee ennen sitä, joka vain odottaa päätöstä. Näkyvyys määräytyy sen mukaan, kenenä olette kirjautuneet, eikä osoitteessa olevan tunnisteen perusteella, joten URL-osoitteessa ei ole tilitunnusta, jota tarkistaa, eikä sellaista, jota peukaloida. Toimisto näkee asiakaskuntansa; yhden brändin asiakas näkee samalla näytöllä oman tilinsä.

Hälytykset menevät sähköpostiin, Slackiin tai ei kumpaankaan, ja ne asetetaan tapahtumatyyppi- ja henkilökohtaisesti eikä kerralla koko tilille, ja Slack-viestit linkittävät suoraan sille näytölle, jota tapahtuma koskee. Mittauksen puolella jokainen sivusto asetetaan käyttämään GA4:ää, Matomoa tai Pertenton omaa seurantaa, mikä tarkoittaa, että laskemamme konversiot voivat olla samoja tapahtumia, jotka analytiikkanne jo laskee, eikä kilpaileva määritelmä ostolle, jota jonkun pitäisi sovittaa yhteen.