Learningkaarten

Een learningkaart is het verslag van één afgeronde test. Zodra Learnings voor een website is ingeschakeld, analyseert Pertento elke test een uur na afloop, wanneer de definitieve statistieken beschikbaar zijn. De kaart beschrijft stap voor stap wat elke variant op de pagina veranderde, vat het inzicht uit de test samen in één zin en vermeldt of het resultaat de hypothese ondersteunde, een mogelijke verklaring en een volgende test.

Elke variant krijgt eigen labels, omdat een test met drie varianten vaak drie verschillende dingen probeert. De wijzigingstypes en het paginatype komen uit vaste lijsten. Daarnaast krijgt elke variant een label voor het gewijzigde element en een thema. Zo komen tests die onder verschillende namen hetzelfde idee onderzoeken bij elkaar te staan. Die labels vormen de basis voor de patronen.

De AI leest de test zelf: de wijzigingen, de code van de varianten, de hypothese, de targeting, schermafbeeldingen van de varianten als u dat toestaat, en de debrief van het team. Hij baseert zijn analyse op een resultaat dat code al heeft berekend, en elk cijfer op de kaart komt uit de statistiek. Een zin met een eigen cijfer van de AI wordt weggegooid in plaats van getoond.

Op een kaart staat dat deze door AI is geschreven totdat iemand de kaart als beoordeeld markeert. De kaart staat in de bibliotheek op de rij van de test, naast de interpretatie van het team uit de debrief. De kaart wordt één keer geschreven en alleen herschreven wanneer de beschreven inhoud verandert. Een herberekende bandbreedte leidt dus niet tot een nieuwe kaart of extra verbruik van credits.