Testes A/B em e‑commerce: como testar e vender mais

Quase todas as lojas têm uma lista de ideias para vender mais: mudar a página de produto, encurtar o checkout, mostrar avaliações noutro sítio. O difícil não é ter ideias, é saber quais funcionam. Um teste A/B responde a isso com dados, em vez de opiniões.

Neste guia explicamos como funciona um teste A/B, como calcular quanto tempo deve durar, como ler os resultados sem cair nas armadilhas mais comuns e o que testar primeiro numa loja Shopify. Com uma diferença em relação à maioria dos guias: pensado para lojas portuguesas, que raramente têm o tráfego de uma loja americana.

O que é um teste A/B

Num teste A/B mostra‑se a versão atual de uma página (o controlo) a uma parte dos visitantes e uma versão alterada (a variante) à outra parte, ao mesmo tempo. No fim compara‑se uma métrica definida à partida, por exemplo a taxa de conversão.

1. 01Encontrar um problema ou uma oportunidade nos dados.
2. 02Criar a variante, com uma alteração clara.
3. 03Dividir o tráfego de forma aleatória, normalmente 50/50.
4. 04Recolher dados até atingir a amostra planeada.
5. 05Avançar com a versão vencedora, ou registar o que se aprendeu.

Porque vale a pena testar

A experiência das equipas que mais testam é clara: a maior parte das ideias não melhora nada. Ronny Kohavi, que liderou a experimentação na Microsoft e na Amazon, conta que cerca de um terço das ideias ganha, um terço não muda nada e um terço piora os resultados. Sem testar, as duas últimas também vão para produção.

Os ganhos também se acumulam. Uma loja que fatura 100 mil euros por mês e melhora a conversão em 5% ganha 5 mil euros por mês, todos os meses, sem gastar mais em media. E cada teste seguinte parte de uma base melhor.

A/B, split URL e multivariado

Teste A/B

As duas versões vivem no mesmo URL e a ferramenta decide qual mostrar a cada visitante. É o formato mais rápido e serve para a maioria das alterações.

Split URL

Controlo e variante estão em URLs diferentes e parte do tráfego é redirecionada. Faz sentido para redesenhos grandes, mas exige mais desenvolvimento e cuidado com o SEO.

Multivariado

Testa várias alterações em simultâneo e todas as combinações entre elas. Três elementos com duas opções cada já dão oito versões, por isso só funciona com muito tráfego e muitas conversões por mês.

Como se faz um teste A/B, passo a passo

1. Partir de dados

Comece pelo Google Analytics, mapas de calor, gravações de sessões, avaliações e pedidos ao apoio ao cliente. Procure onde os visitantes desistem e porquê. Defina um objetivo concreto, por exemplo aumentar a taxa de adição ao carrinho na página de produto sem baixar o valor médio da encomenda.

2. Escrever a hipótese

Uma boa hipótese diz o que vai mudar, o que se espera e porquê: "Se mostrarmos o prazo de entrega junto ao botão de compra, mais pessoas vão adicionar ao carrinho, porque a dúvida mais comum no apoio ao cliente é quando chega a encomenda." Mesmo que a variante perca, fica a saber algo sobre os seus clientes.

3. Escolher as métricas

• Uma métrica principal, como a taxa de conversão ou a receita por visitante, com o ganho mínimo que justifica a alteração.
• Métricas secundárias para perceber o comportamento: adições ao carrinho, início de checkout.
• Métricas de proteção que não podem piorar: valor médio da encomenda, devoluções, velocidade da página.

4. Escolher a ferramenta

Depende da plataforma, da equipa e do tráfego. Falamos das opções mais à frente.

5. Criar a variante

Mude uma coisa, ou um conceito bem definido. Se mudar o título, as imagens e o botão ao mesmo tempo, não vai saber o que fez a diferença. Duas ou três variantes chegam; mais do que isso divide o tráfego e alonga o teste.

6. Calcular a amostra e a duração

Antes de começar, calcule quantos visitantes precisa. Os dados de entrada são a taxa de conversão atual, o menor efeito que quer detetar e o nível de confiança (normalmente 95%, com 80% de potência).

7. Analisar e decidir

Leia os resultados só quando atingir a amostra planeada. Se a variante ganhar, publique‑a. Se perder ou empatar, registe o que aprendeu. Se o resultado for inesperado, separe por dispositivo e por visitantes novos e recorrentes antes de concluir.

O que testar numa loja online

• Títulos e textos: a proposta de valor, os benefícios, o tom.
• Botões e chamadas para ação: texto, tamanho, posição, contraste.
• Páginas de entrada: imagem principal, sinais de confiança, ordem das secções.
• Formulários: número de campos, ordem, campos opcionais.
• Imagens e vídeo: fotografias de produto, em uso, vídeo curto.
• Preços e ofertas: portes grátis, descontos em percentagem ou em euros, packs.
• Navegação: menus, filtros, ordenação por defeito.
• Prova social: avaliações, número de clientes, selos de confiança.

Para decidir por onde começar, dê a cada ideia uma nota de 1 a 10 em impacto, confiança e facilidade (o método ICE) e comece pelas que somam mais.

Significância estatística, sem complicar

Uma variante com mais 12% de conversão não é, por si só, uma vencedora. Com pouca amostra, diferenças grandes aparecem por acaso. O padrão é exigir 95% de confiança: se não houver diferença real, há menos de 5% de probabilidade de ver um resultado assim.

Três coisas pesam: o tamanho da amostra, o tamanho do efeito e a taxa de conversão de partida. Efeitos pequenos e conversões baixas pedem muito mais tráfego.

Frequentista ou bayesiano

O método frequentista fixa a amostra à partida e dá um valor‑p no fim. O bayesiano dá a probabilidade de a variante ser melhor e vai atualizando com os dados. Os dois servem, desde que a regra de paragem seja decidida antes de começar.

Espreitar e amostras desequilibradas

Olhar para os resultados todos os dias e parar quando parecem bons é o erro mais comum. Com dez espreitadelas, a probabilidade de um falso positivo passa de 5% para perto de 20%. Outro sinal de alarme é uma divisão desequilibrada: se configurou 50/50 e recebe 53/47, há um problema técnico (redirecionamentos, cache, bots) e os resultados não são fiáveis.

Os testes A/B prejudicam o SEO?

Não, se seguir as regras da Google para testes:

• Não mostrar ao Googlebot uma versão diferente da que mostra aos visitantes.
• Nas variantes com URL próprio, usar uma tag canonical a apontar para a página original.
• Usar redirecionamentos 302 (temporários), não 301.
• Terminar o teste quando houver um vencedor e publicar a versão final.

Atenção também à velocidade: ferramentas que trocam o conteúdo no browser podem atrasar o carregamento e piorar o LCP. Testes feitos no servidor evitam esse problema.

Ferramentas de testes A/B

O Google Optimize acabou em 2023 e o mercado dividiu‑se entre ferramentas para equipas de marketing e plataformas para equipas de produto:

• Optimizely: a referência em empresas grandes, com testes no browser e no servidor.
• VWO: testes A/B com mapas de calor, gravações e análise de formulários.
• AB Tasty: europeia, com boa resposta ao RGPD.
• Convert: focada em privacidade, sem depender de cookies de terceiros.
• LaunchDarkly e Statsig: feature flags e testes no servidor, para equipas de desenvolvimento.

Em Shopify, as ferramentas nativas e as apps feitas para a plataforma costumam integrar melhor e pesar menos na loja.

Testes A/B em Shopify

Páginas de produto

São as mais testadas, e com razão. Teste a galeria de imagens, a ordem entre descrição e avaliações, a prova social perto do preço, o prazo de entrega junto ao botão e a simplicidade do bloco de compra. Alterações de layout costumam mexer mais nos números do que mudanças de texto.

Coleções

Grelha ou lista, número de produtos por página, filtros mais ou menos visíveis e a ordenação por defeito.

Carrinho e checkout

Cerca de sete em cada dez carrinhos são abandonados. Teste o checkout como convidado, menos campos, sinais de confiança e os métodos de pagamento à vista; em Portugal, MB WAY e Multibanco fazem diferença. O checkout só se personaliza a fundo em Shopify Plus.

Shopify Rollouts

O Shopify tem agora testes nativos, os Rollouts, em Mercados > Rollouts: permitem agendar alterações e comparar duas versões do tema com parte do tráfego. A disponibilidade e as opções variam com o plano, e os testes ficam limitados a alterações de tema.

Apps de testes

Para testes de preço, de conteúdo ou de páginas específicas, apps como o Shoplift integram‑se com o tema sem injetar scripts pesados e mostram os resultados no próprio Shopify.

Erros comuns

• Parar cedo, assim que a variante parece ganhar.
• Mudar demasiadas coisas numa só variante.
• Ignorar o dispositivo: o que ganha em desktop pode perder em mobile.
• Decidir pela opinião mais alta da sala em vez dos dados.
• Não segmentar os resultados quando são inesperados.
• Confundir novidade com melhoria: uma mudança chama a atenção nos primeiros dias e depois o efeito desaparece.
• Esquecer o consentimento: em Portugal e na UE, as ferramentas de teste também têm de respeitar o RGPD e o banner de cookies.
• Não registar o que se aprendeu, e repetir testes que já foram feitos.

Testes A/B com o tráfego de uma loja portuguesa

A maior parte dos guias assume centenas de milhares de visitas por mês. Em Portugal, uma boa loja tem muitas vezes 20 a 80 mil sessões mensais. Isso não impede testar, mas muda a forma de o fazer:

• Testar mudanças grandes, que possam mexer 15% ou mais, em vez de detalhes que precisam de meses para dar resultado.
• Testar onde está o tráfego: página de produto e carrinho, não a página "Sobre nós".
• Usar a receita por visitante quando a conversão é baixa: junta conversão e valor médio e mostra ganhos que a taxa de conversão sozinha esconde.
• Fazer primeiro um teste A/A, com duas versões iguais, para confirmar que a ferramenta divide o tráfego bem e que os números batem certo com as encomendas no Shopify.
• Não esquecer os pagamentos locais: MB WAY, Multibanco e prazos de entrega em Portugal continental e ilhas são das alterações com mais impacto que vemos.

Criar uma cultura de testes

• Um roadmap de testes, com as ideias priorizadas e um responsável por cada uma.
• Prioridades pelo ICE: impacto, confiança e facilidade.
• Um registo de cada teste: hipótese, resultado, capturas de ecrã e decisão.
• Expectativas realistas: muitos testes empatam, e os que ganham trazem melhorias de 5% a 15%. Somados ao longo de um ano, fazem diferença.

A maioria das lojas portuguesas não tem tráfego para detetar ganhos de 2% ou 3% em tempo útil. Para essas, vale mais testar mudanças grandes, como uma página de produto nova ou outro modelo de portes, e fazer pesquisa qualitativa antes. Lojas com menos de mil visitas por mês devem começar por entrevistas, gravações de sessões e análise de avaliações.

Perguntas frequentes

Fazemos testes A/B em lojas Shopify como parte do trabalho de Growth e consultoria. Se quer saber o que testar primeiro na sua loja, fale connosco.