Teste A/B é o método de comparar duas versões, A e B, de uma página, anúncio ou e-mail, para ver qual delas performa melhor. As duas versões são exibidas a públicos equivalentes ao mesmo tempo, e o resultado mostra qual variante gera o melhor desempenho na métrica observada.
Como funciona
No teste A/B, apenas uma variável é alterada de cada vez entre a versão A e a versão B, como um título, uma cor de botão ou uma chamada para ação. Isso permite atribuir qualquer diferença de resultado a essa única mudança, isolando o que de fato influenciou o desempenho. Já o teste multivariado, ou MVT, testa várias variáveis combinadas ao mesmo tempo, em vez de uma só, o que permite avaliar diferentes combinações de elementos em um único teste.
Quando usar
O teste A/B é usado quando se quer isolar o efeito de uma mudança específica com clareza sobre a causa do resultado. O teste multivariado é indicado quando o interesse está em entender como diferentes elementos interagem entre si, avaliando várias combinações ao mesmo tempo, o que costuma exigir um volume maior de tráfego para gerar resultados confiáveis, já que o número de variações a testar é maior do que em um teste A/B simples.