Estatísticas que se defendem
Receita por variante
A taxa de conversão é um proxy. Uma variante que converte melhor e vende mais barato não é uma vitória.
Cada conversão traz consigo o dinheiro que veio com ela, e a receita é atribuída à variante em que o visitante estava. Os valores são guardados como cêntimos inteiros em vez de vírgula flutuante, e o total inclui imposto e envio como a plataforma os recebe.
É um objectivo por direito próprio e não uma coluna ao lado do verdadeiro. A significância e os intervalos são calculados tanto sobre a receita como sobre as conversões, pelo que um resultado de receita pode ser lido com o mesmo padrão de evidência que um resultado de taxa de conversão.
A fila de implementação lê os dois, por ordem: as conversões primeiro, porque esse é o objectivo primário e a sua matemática não leva aproximação, depois a receita, pelo que um teste que ganhou só na receita ainda chega a quem o pode lançar.
A receita precisa sempre de uma moeda escolhida, e isso não é uma limitação a contornar. Somar coroas a euros produz um número que não significa nada, pelo que a consola torna a moeda explícita em vez de somar silenciosamente.