Balanço do teste

O resultado de um teste esquece-se quando quem o conduziu passa a outra coisa. O balanço fecha esse ciclo. Quando termina um teste, o Pertento oferece uma pergunta breve que mostra o resultado e a hipótese e pergunta depois o que esperava, porque acha que aconteceu e o que vai fazer a seguir. Todas as perguntas são opcionais, e terminar um teste nunca espera por elas.

O Pertento rascunha o que consegue ver, e você confirma ou corrige. Compara uma semana completa de tráfego do site com a primeira semana, para os dispositivos a que o teste se dirigia, e assinala uma variação de 15% ou mais nos testes que correram 14 dias ou mais. Anota também falhas de medição: dias sem visitantes registados, ou uma divisão de visitantes que se afastou dos pesos planeados. A sua resposta decide que factores externos o balanço regista.

Depois, o teste passa a ter um separador “Debrief”, um único cartão encabeçado pela lição. Os factos das suas estatísticas ficam de um lado (ganho, confiança, visitantes e os dias que o teste correu) e as respostas da sua equipa do outro. O título é escrito a partir das estatísticas, nunca digitado, para que não possa exagerar um resultado. Uma variante que parece boa isoladamente mas não alcança o limiar mais exigente necessário quando se comparam várias variantes é descrita como não o suficiente para a dar como vencedora, e não como vitória nem como estável.

O separador existe em qualquer teste que tenha terminado ou que tenha tido um vencedor publicado. Qualquer pessoa com acesso ao teste pode preenchê-lo ou alterá-lo em qualquer momento, e o cartão mostra quem o escreveu em último lugar e quando, para que um novo colega encontre a lição onde o teste vive.