pesquisa com usuários - aula 05 - faculdade impacta

7

TESTES COM USUÁRIOS

8

7

Testar com 1 usuário é

do que não testar com nenhum. 100% melhor

Fonte: http://www.useit.com/alertbox/20000319.html

5 usuários = 85% dos problemas de usabilidade

Mas os testes de usabilidade não

são muito caros?

SIM, ELES PODEM SER.

MAS TAMBÉM PODEM CUSTAR MUITO POUCO.

OBJETIVOS

  Entender forma como usuários buscam as informações

  Validar estruturas e rótulos

  Geralmente ocorre depois da realização de algumas sessões de card sorting – estrutura mais madura

CARACTERÍSTICAS

Duração 20 a 60 minutos por usuário

Custo Tempo das pessoas, confecção dos materiais

Abrangência Baixa

Profundidade Alta

Tipos Sketch, Wireframe

Resultados Navegação, melhorias na estrutura de organização

ETAPAS

1.  Definição das hipóteses

2.  Definição do tipo de teste

3.  Definição do público

4.  Convite

5.  Preparação do roteiro

6.  Preparação da dinâmica

7.  Condução

8.  Tabulação e análise

9.  Apresentação dos resultados e incorporação no projeto

PASSO 1: DEFINIÇÃO DAS HIPÓTESES DEVE-SE DEFINIR NESTA E TAPA O QUE SE QUER TESTAR NA INTERFACE. PARA ELENCAR AS QUESTÕES DE PESQUISA, VALE PERGUNTAR:

  Há alguma dúvida da equipe sobre algum elemento da interface? Algo que gostariam de testar?

  Há algum elemento que na opinião da equipe não está muito bem resolvido? Vale a pena testá-lo.

  Quais as áreas ou elementos mais acessados do produto na opinião da equipe? Estes itens devem ser testados.

  Quais os elementos ou fluxos prioritários do produto? Estes itens precisam ser testados também.

  Quais as grandes inquietações da equipe sobre o produto? “Os usuários conseguem efetuar a compra?”, “Por que os usuários irão se cadastrar no serviço”? “Em que pontos meu produto é melhor e pior do que o meu concorrente?”

PASSO 2: DEFINIÇÃO DO TIPO DE TESTE DEPENDENDO DOS OBJE TIVOS E HIPÓTESES DO TESTE, PODE-SE ESCOLHER ENTRE VÁRIOS TIPOS:

  Teste presencial: teste realizado presencialmente, com a condução de um moderador. É realizado quando há facilidade para deslocamento dos usuários ou da equipe de pesquisa. É o tipo de teste em que potencialmente se tem mais riqueza de resultados (se bem conduzido).

  Teste remoto moderado: teste realizado remotamente, mas com a moderação de alguém. Um ponto forte é que o usuário está em seu ambiente e não se sente tão pressionado com a presença de alguém. Ao mesmo tempo, os moderadores não conseguem captar nuances e detalhes no comportamento do usuário (ex: linguagem corporal)

  Teste remoto sem moderação: usuário testa o sistema remotamente a partir de um roteiro específico e vai preenchendo questionário de avaliação. Este tipo de teste normalmente é gravado para análise dos resultados

  Teste comparativo: teste em que o usuário avalia duas interfaces. É recomendado para avaliar a efetividade de produtos semelhantes ou para avaliar interfaces que possuem funcionalidades parecidas.

PASSO 3: DEFINIÇÃO DO PÚBLICO DO TESTE AQUI DEVE-SE DEFINIR QUAIS OS PERFIS DE USUÁRIO QUE IRÃO TESTAR O PRODUTO OU SERVIÇO. PARA DEFINI-LOS, É IMPORTANTE SEGUIR AS E TAPAS ABAIXO:

  Assim como em uma pesquisa científica, testamos perfis de participantes distintos para fragmentar a análise, tentando buscar variações de comportamento e isolar os problemas.

  Pensando nisso, criar lista de critérios relevantes de segmentação , a partir das hipóteses definidas na etapa anterior (idade, gênero, localização geográfica,classe, maturidade digital, escolaridade, lifestyle, etc.)

  Priorizar os critérios mais importantes (p. ex.: entre idade e gênero, a idade é mais importante para o objetivo da pesquisa)

  Priorizar categorias de públicos mais importantes dentro dos critérios (p. ex.: dentro do critério idade, as categorias mais importantes são 25-30 anos e 30-35 anos).

  Definir número de participantes representativo para cada perfil (o ideal é ter pelo menos um para cada perfil, mas em uma abordagem “quick and dirty”, qualquer tipo de feedback é bem-vindo.

Idade (20-25)

Idade (25-30)

Idade (30-35)

Gênero (Masculino)

Gênero (Feminino)

Idade (20-25) 1 1

Idade (25-30) 1 1

Idade (30-35) 1 1

Gênero (Masculino)

Gênero (Feminino)

Total: 6 usuários

PASSO 4: CONVITE

  Tipos de recrutamento:

  E-mail (para contatos, que podem convidar outros contatos)

  Redes sociais (twitter e linkedin)

  Base de dados: base de usuários cadastrados no produto (ou newsletter)

  Ethnio (http://ethn.io), ferramenta para recrutamento remoto

  Recrutamento em pontos específicos: cartazes em universidades, cafés ou locais em que se espera encontrar possíveis participantes dentro dos perfis

  Empresas de recrutamento (abordagem mais cara)

  Planejar questões de filtro, baseadas nos critérios de perfil definidos

  O filtro pode ser feito por telefone ou via questionário do google docs, por exemplo (exceto no caso do Ethnio, que já inclui o questionário)

  Não mencionar incentivo antes do término do questionário (o ideal mesmo é não mencionar até depois da realização do teste)

CRITÉRIOS PARA CLASSIFICAÇÃO SOCIOECONÔMICA

Critério de Classificação Econômica Brasil (em vigor) – 2008. ABEP, ABIPEME

CRITÉRIOS PARA CLASSIFICAÇÃO SOCIOECONÔMICA

Critério de Classificação Econômica Brasil (em vigor) – 2008. ABEP, ABIPEME

EXEMPLO

  Gênero ( ) Homem ( ) Mulher

  Com que frequência utiliza o site? ( ) pelo menos 1 vez nos últimos 6 meses [encerra] ( ) pelo menos 1 vez nos últimos 3 meses [prossegue]

  Já realizou alguma compra no site? ( ) sim [prossegue] ( ) não [encerra]

DUMAS, Joe; LORING, Beth. Moderating Usability Tests.

EXEMPLO

  Gênero ( ) Homem ( ) Mulher

  Com que frequência utiliza o site? ( ) pelo menos 1 vez nos últimos 6 meses [encerra] ( ) pelo menos 1 vez nos últimos 3 meses [prossegue]

  Já realizou alguma compra no site? ( ) sim [prossegue] ( ) não [encerra]

DUMAS, Joe; LORING, Beth. Moderating Usability Tests.

PASSO 5: PREPARAÇÃO DO ROTEIRO

  Os usuários devem ser convidados a realizar tarefas, simulando situações reais de uso. Muitas vezes deve-se criar um cenário de uso, para que o usuário entenda o porquê daquela tarefa.

  Pensar em todas as possibilidades – não pode haver becos sem saída na tarefa

  As tarefas precisam ser objetivas e auto-explicativas. O usuário precisa ler e entender sozinho o que você quis dizer.

  Ordem das tarefas: começar com mais simples para que usuários não se sintam frustrados

  No máximo 10 tarefas – cerca de 45 minutos de teste

  Realizar pré-teste

  Preparação de roteiro pós-teste, com perguntas mais qualitativas

DUMAS, Joe; LORING, Beth. Moderating Usability Tests.

EXEMPLOS

  Quantas pessoas moram com você? [explorar características da família]

  Imagine que você soube de uma oferta de um microondas através de um amigo. Mostre-me como você encontraria esta oferta no site. [verificar se usuário enxerga o banner de ofertas em eletrodomésticos]

  Imagine que você precisa alterar seu endereço de cadastro no site. Mostre-me como faria este processo.

  Você já conhecia esta funcionalidade? ( ) sim ( ) não

  O que achou do processo? Por quê? ( ) bom ( ) regular ( ) ruim

  Você mudaria alguma coisa?

PREPARANDO PROTÓTIPOS PARA TESTE STRESS TEST

1.  Do que trata a página?

2.  Que site é este?

3.  Quais são as principais seções do site?

4.  Como eu subo um nível na navegação daqui?

5.  Como eu chego na página inicial?

6.  Como eu chego na primeira página desta seção?

PASSO 6: CONDUÇÃO

  Perfil “Host Gracioso”

  Perfil Líder

  Perfil Observador Neutro

DUMAS, Joe; LORING, Beth. Moderating Usability Tests.

PASSO 6: CONDUÇÃO ANTES DO TESTE – TERMO DE CONSENTIMENTO

  Propósito do teste

  Procedimentos (tempo, tarefas)

  Gravação (ocorre ou não, como os resultados são disponibilizados)

  Confidencialidade (divulgação do nome, nomeação das ocorrências)

  Riscos

  Pausas (mostrar que usuário tem esse direito)

  Desistência (sem penalidade, impacto na remuneração)

  Remuneração

  Questões (dados de contato)

DUMAS, Joe; LORING, Beth. Moderating Usability Tests.

PASSO 6: CONDUÇÃO DURANTE O TESTE - FACILITAÇÃO

  Observador neutro

  Usuários devem ser convidados a pensar alto

  Convidar usuários a pensar alto

  E então?

  Conte-me o que você está enxergando

  Conte-me o que você acabou de fazer

  Conte-me o que está acontecendo neste momento

  Por que você fez isto?

DUMAS, Joe; LORING, Beth. Moderating Usability Tests.

PASSO 6: CONDUÇÃO DURANTE O TESTE – LIDANDO COM FRUSTRAÇÕES

  Observador neutro vs. líder

  Frases de encorajamento

  Você está indo bem

  Você está ajudando muito

  Isto é exatamente do que precisamos

  Isto o que está acontecendo irá ajudar muitos usuários no futuro

  Este tipo de coisa já aconteceu com outros usuários antes

  Em casos mais críticos

  Assuma a tarefa

  Assista o usuário na realização da tarefa

  Faça uma pausa, saia da sala com o usuário

DUMAS, Joe; LORING, Beth. Moderating Usability Tests.

PASSO 7: ITENS A SEREM OBSERVADOS DURANTE O TESTE

  Execução da tarefa

  Rapidez de execução da tarefa (eficácia)

  Quantidade de cliques corretos (eficiência)

  Capacidade de memorização

  Satisfação

  Aspectos qualitativos (conversa durante o exercício, roteiro de entrevista final)

DUMAS, Joe; LORING, Beth. Moderating Usability Tests.

EXEMPLO DE GABARITO PARA TESTE

TECHSMITH MORAE

SOFTWARES DE GRAVAÇÃO

  http://www.techsmith.com (windows)

  http://silverbackapp.com

  http://usabilitytools.com

  http://www.openhallway.com

  http://www.loop11.com

  http://www.optimalworkshop.com/chalkmark.htm

O mais simples e barato:

  Gravador de tela (CamStudio, Camtasia, Captivate, etc.)

OUTRAS MODALIDADES DE TESTES

8

7

TESTE A/B

TESTES REMOTOS

http://www.gotomeeting.com/fec/online_meeting

AUTO TESTE

TESTE EM MOBILE (EM LABORATÓRIO)

TESTE EM MOBILE (EM CAMPO)

MATERIALIZANDO RESULTADOS DOS TESTES

8

7

WIREFRAME COM ANOTAÇÕES

2

3

1

4

Communica)ng  User  Research  Findings  -­‐  Jim  Ross  

Categoria Finding Severidade Evidência Recomendação Complexidade

Navegação

Usuários não conseguem encontrar conteúdo x

Alta T1, T3, T8 Dar mais destaque ao conteúdo

Baixa

MATRIZ DE FINDINGS

SCREENSHOTS

Communica)ng  User  Research  Findings  -­‐  Jim  Ross  

MOCKUPS E SKETCHES

Communica)ng  User  Research  Findings  -­‐  Jim  Ross  

FOTOS

Communica)ng  User  Research  Findings  -­‐  Jim  Ross  

GRAVAÇÕES

Communica)ng  User  Research  Findings  -­‐  Jim  Ross  

RASTREAMENTO DE CLIQUES

Communica)ng  User  Research  Findings  -­‐  Jim  Ross  

EYE TRACKING

Communica)ng  User  Research  Findings  -­‐  Jim  Ross  

VA L E N D O 1 P O N T I N H O N A N O TA D O T R A B A L H O :

C R I A R , PA R A O P R O D U T O D E VO C Ê S U M A E S T R AT É G I A S I M P L E S D E T E S T E :

-  T I P O D E T E S T E -  P E R F I L B ÁS I C O D O S U S U Á R I O S A S E R E M

T E S TA D O S -  5 TA R E FAS

8

7

OBRIGADO!

pfloriano@gmail.com @prfloriano

7