como fazer testes ab no ecommerce
DESCRIPTION
Dicas de Alexandre Miranda, prof. nos cursos de e-commerce da Ecommerce School. Palestra feita na 9a Edicao da Semana Ecommerce, evento gratuito de ecommerce.TRANSCRIPT
COMO FAZER TESTES A/B
NO ECOMMERCE
ALEXANDRE MIRANDA
www.ecommerceschool.com.br
O QUE É UM TESTE A/B ?
• Ajuda a testar grandes variações
de Design/layout
www.ecommerceschool.com.br
100.000
Visitantes
3
COMO FUNCIONA?
Ferramenta de testes
Página A
Versão 1
Página A
Versão 2
50.000
Visitantes
50.000
Visitantes
Resultado das conversões geradas
www.ecommerceschool.com.br 5
O QUE É UM TESTE A/B ?
Topo do site
Menu de categorias
Imagem 1
Rodapé
Lorem ipsum lorem ipsum
lorem ipsum lorem ipsum
lorem ipsum lorem ipsum
lorem ipsum lorem ipsum
lorem ipsumlorem ipsum
lorem ipsum lorem ipsum
Link 1
Link 2
Link 3
Rodapé
Menu
Topo do site
Lorem ipsum lorem ipsum lorem
ipsum lorem ipsum lorem ipsum
lorem ipsum lorem ipsum lorem
ipsum lorem ipsumlorem ipsum
lorem ipsum lorem ipsumLorem
ipsum lorem ipsum lorem ipsum
lorem ipsum lorem ipsum lorem
ipsum lorem ipsum lorem ipsum
lorem ipsumlorem ipsum lorem
ipsum lorem ipsum
Imagem 1
Link 1 Link 2 Link 3
Design Versão 1 Design Versão 2
www.ecommerceschool.com.br 6
O QUE É UM TESTE A/B ?
• Você aprende os padrões que
funcionam para seus usuários
• Replica este padrões em outras
páginas ou áreas do site
PLANEJANDO
UM TESTE A/B
7
www.ecommerceschool.com.br 8
DECIDINDO O QUE TESTAR
Decida qual / quais páginas devem ser testadas
Teste mudanças que tenham grande impacto
Os dados do analytics podem ser um boa pista de por onde
começar
Entender onde acontecem os abandonos é importante para
definir as páginas que serão testadas
www.ecommerceschool.com.br 9
DECIDINDO O QUE TESTAR
• Vitrine Compra realizada com
sucesso! ( MACRO)
• Vitrine Detalhes Carrinho
Cadastro Pagamento
Compra realizada com sucesso
Micro 1 Micro 2 Micro 3
Micro 4 Micro 5
LAYOUT/DESIGN
DIFERENTES
10
www.ecommerceschool.com.br 11
DECIDINDO O QUE TESTAR
• Layouts diferentes
FORMATOS
DE
CADASTRO
24/03/2012
12
www.ecommerceschool.com.br 13
24/03/2012
DECIDINDO O QUE TESTAR
• Telas de cadastro diferentes
MENU
24/03/2012
14
DETALHES
DO PRODUTO
24/03/2012
16
www.ecommerceschool.com.br 17
24/03/2012
DECIDINDO O QUE TESTAR
Lorem ipsum Lorem ipsumLorem ipsumLorem ipsum
Lorem ipsum Lorem ipsumLorem ipsumLorem ipsum
Lorem ipsum Lorem ipsumLorem ipsumLorem ipsum
Lorem ipsum Lorem ipsumLorem ipsumLorem ipsum
Lorem ipsum Lorem ipsumLorem ipsumLorem ipsum
Lorem ipsum Lorem ipsumLorem ipsumLorem ipsum Lorem
ipsum Lorem ipsumLorem ipsumLorem ipsum
Lorem ipsum Lorem ipsumLorem ipsumLorem ipsum
Detalhes
Detalhes
• Lorem ipsum Lorem ipsumLorem ipsumLorem
• Lorem ipsum Lorem ipsumLorem ipsumLorem
• Lorem ipsum Lorem ipsumLorem ipsumLorem
• Lorem ipsum Lorem ipsumLorem ipsumLorem
• Lorem ipsum Lorem ipsumLorem ipsumLorem
BOTÕES
DE AÇÃO
24/03/2012
18
www.ecommerceschool.com.br 19
DECIDINDO O QUE TESTAR
Texto
Tamanho
Posicionamento
www.ecommerceschool.com.br 20
DECIDINDO O QUE TESTAR
Com ou sem imagem?
OU
www.ecommerceschool.com.br 21
DECIDINDO O QUE TESTAR
Formatos de Páginas de FAQ
Preço de produtos e ofertas
Imagens diferentes nas páginas de produtos
Quantidade de texto em determinada página
Título de um produto
MÉTRICAS
SÃO FUNDAMENTAIS!
23
www.ecommerceschool.com.br 24
MÉTRICAS DE CONVERSÃO A/B
Não basta apenas criar versões diferentes de páginas e
elementos.
É necessário saber o que se quer medir e qual é a
métrica que será
utilizada
www.ecommerceschool.com.br
MÉTRICAS DE CONVERSÃO A/B
Menor desistência?
Melhor conversão
Diminuição em
ligações ou e-mails de
dúvida
www.ecommerceschool.com.br 26
MÉTRICAS DE CONVERSÃO A/B
Maior quantidade de
cliques
Páginas que
receberam acesso
através do menu
www.ecommerceschool.com.br
MÉTRICAS DE CONVERSÃO A/B
Menor taxa de desistência
Menor quantidade de erros
Menor tempo de preenchimento
www.ecommerceschool.com.br
DECIDINDO O QUE TESTAR
Qual botão tem melhor
aceitação?
Mudei a posição?
Mudei o texto ?
Com ou sem o cadeado de
segurança?
SETUP
BÁSICO DE UM TESTE A/B
29
www.ecommerceschool.com.br
SETUP BÁSICO
1. Definição dos elementos de teste
2. Definição dos indicadores de resultado (métricas)/páginas de
conversão
3. Selecionar a ferramenta que será utilizada
4. Inserir os scripts, fazer upload das páginas no servidor.
5. Aguardar a definição do resultado
EXEMPLO!
32
www.ecommerceschool.com.br
EXEMPLO
1. Identificaçã
o de um
problema /
Oportunida
de
www.ecommerceschool.com.br 34
EXEMPLO
• Hipótese -
1. Pontos que distraem o
usuário do
preenchimento do
cadastro.
www.ecommerceschool.com.br 35
EXEMPLO
1. Checagem em real time do que está sendo preenchido
2. Baseado em perguntas anteriores foi inserifo um box explicando o
que o usuário irá receber ao preencher o formulário.
www.ecommerceschool.com.br 41
EXEMPLO
37.1% DE AUMENTO
NO PREENCHIMENTO DO
FORMULÁRIO
POR QUANTO
TEMPO
TESTAR?
42
www.ecommerceschool.com.br 43
POR QUANTO TEMPO TESTAR?
http://visualwebsiteoptimizer.com/ab-split-test-duration/
FINALIZANDO
...
44
www.ecommerceschool.com.br 45
SETUP BÁSICO
Sempre teste as versões simultaneamente.
Não tire conclusões apressadas! As ferramentas trabalham com
algo chamado “Intervalo de confiança estatístico”, que garante
que o resultado tenha validade estatística, portanto que seja
confiável!
Os resultados podem ser surpreendentes mesmo que para você
não faça sentido! Lembre-se, Estatística!
www.ecommerceschool.com.br 46
SETUP BÁSICO
Teste sempre! Só existem Três opções como resultado.
Resultado de teste negativo
Resultado de teste inconclusivo
Resultado de teste positivo!