Experimentação

Fila de implementação

Uma fila de vencedores que vale a pena construir, com a mudança já anexada, para lançar um ser um colar, não uma reunião.

Só vencedores de verdadeConversões e receitaAcompanhada até o fim

Um vencedor que nunca é lançado não vale nada. A fila de implementação é a lista de experimentos que produziram algo que vale a pena construir, com a variante, a mudança e o resultado anexados.

O que a torna útil é o que ela recusa listar. Uma versão anterior tratava todo experimento concluído sem implantação como trabalho esperando para ser feito, o que significava que variantes perdedoras e testes sem efeito ficavam na fila como se alguém tivesse decidido construí-los. As entradas agora precisam passar pelos mesmos critérios que o resto do console aplica: uma direção clara, tráfego suficiente por braço, e um intervalo de ganho que fica de um só lado do zero.

Ela lê as duas metas, e não só uma. As conversões são consultadas primeiro, porque esse é o objetivo primário e a matemática dele não tem aproximação nenhuma, e a receita em segundo lugar, então um experimento que venceu só na receita ainda chega à fila.

Cada entrada acompanha o próprio estado até ser fixada no código, e um sinal separado sinaliza vencedores que foram implantados e ainda estão sendo servidos pela plataforma meses depois. Esse é o caso que vale a pena pegar: funciona, mas a mudança pertence à sua base de código.

Melhores testes, melhores conversões

Test on all visitors with the world’s lightest script and make confident decisions powered by real-time reporting.