Explicações em português simples

Os resultados estatísticos são lidos por pessoas que não os calcularam, e a maior parte do dano que um ecrã de resultados causa vem de um número ser lido mal, não de estar errado. Por isso, cada número traz a sua própria explicação, no lugar, escrita para responder ao que lhe está a dizer em vez de definir o termo.

Várias existem especificamente para evitar uma leitura errada. A da diferença absoluta afirma sem rodeios que, por si só, não diz nada sobre se a diferença é real. A das sessões avisa que um comprador que regressa pode produzir mais conversões do que sessões. A do valor p declara o que significa e o que não significa, porque quase toda a gente o lê como a probabilidade de a variante ser melhor.

As definições vivem num só lugar em vez de nos componentes que as apresentam. Duas tabelas a explicar o mesmo número de duas maneiras diferentes é uma coisa pequena que corrói silenciosamente a confiança em todas elas.

O controlo de correcção vai mais além e declara o seu próprio efeito e não só o seu nome: quantas comparações estão em jogo, que limiar o método escolhido está de facto a aplicar, e quando a escolha não pode de todo alterar o resultado.