Experimentação

Rebalanceamento automático de pesos

A divisão realizada é medida e corrigida em intervalos regulares, para que o tráfego que cada variante recebe de fato convirja para o que você configurou.

A cada 15 minutosIgnora testes concluídosPrecisa de dados reais

A atribuição aleatória não produz uma divisão perfeitamente igual, e pequenos desvios se acumulam. O rebalanceamento mede o que cada variante recebeu de fato e empurra os pesos configurados na direção oposta, para que a divisão acumulada convirja para a que você configurou, em vez de se afastar dela.

O job roda a cada quinze minutos contra os experimentos em execução. Ele lê a contagem de sessões por variante, calcula uma correção, grava os novos pesos e aplica um patch no arquivo de runtime já gerado, em vez de reconstruí-lo, porque um rebalanceamento só muda alguns números inteiros.

Duas travas impedem que ele cause dano. Abaixo de uma contagem mínima de sessões, nada é ajustado, já que em volume baixo o desvio que estaria sendo corrigido é só ruído. Um experimento com uma variante já implantada é ignorado por completo: uma implantação significa que o experimento foi concluído, e a divisão dele deixou de ser uma questão de medição.

Tudo que ele faz fica registrado por experimento, então uma divisão que parece estranha pode ser rastreada até os ciclos que a produziram.

Melhores testes, melhores conversões

Test on all visitors with the world’s lightest script and make confident decisions powered by real-time reporting.