Teste A/B: Não deixar o carrinho lateral fechar automaticamente

Esse estudo de caso é sobre um teste para retirar a função de ocultar o carrinho lateral automaticamente depois de alguns segundos na tela. Esse teste teve um resultado bem positivo, com uma possibilidade de aumento geral de 3% a 16% na conversão, e final de 9,22%.

A ideia para esse teste surgiu enquanto analisava o comportamento do cliente na loja usando gravações de tela. Acontecia que alguns clientes estavam clicando para adicionar o produto ao carrinho, então aparecia o carrinho lateral, e enquanto eles estavam revisando os produtos do carrinho, ele fechava e isso forçava o cliente a voltar para a navegação na loja.

A partir dessa observação surgiu a hipótese de que mantendo o carrinho lateral aberto e só fechado manualmente pelo cliente, ele teria o tempo que quisesse para revisar o pedido e já teria o botão de ação para levar ao carrinho logo ao final da lista dos produtos.

Com a hipótese definida, iniciamos a implementação do teste que consistiu em criar uma versão via script com o Optimize sobrescrevendo a função de fechar o carrinho lateral automaticamente. O teste foi conduzido diretamente pelo Optimize e durou um total de 16 dias com 147.513 sessões.

Como resultado final, a variação com a melhoria teve uma taxa de conversão 9,22% maior (2,96% contra 2,71% da versão original), e observando a variação ao longo dos dias teve um aumento real médio de 3% a 16% na conversão (imagem abaixo). 

Esse foi um resultado muito positivo considerando ser uma pequena mudança mas que influenciava diretamente no processo de conclusão do pedido, que é geralmente onde estão as maiores possibilidades de otimização.

‍