projeto final presentation

33
CASE INGRESSE: UM ESTUDO SOBRE AS TÉCNICAS DE MEDIÇÃO DE USABILIDADE Ciência da Computação Instituto de Computação Universidade Federal do Amazonas

Upload: marcelo-henrique

Post on 09-Jul-2015

133 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Projeto final presentation

CASE INGRESSE: UM ESTUDO SOBRE AS TÉCNICAS DE MEDIÇÃO DE USABILIDADE

Ciência da ComputaçãoInstituto de Computação

Universidade Federal do Amazonas

Page 2: Projeto final presentation

CASE INGRESSE: UM ESTUDO SOBRE AS TÉCNICAS DE MEDIÇÃO DE USABILIDADE

Ciência da ComputaçãoInstituto de Computação

Universidade Federal do Amazonas

AlunoMarcelo Henrique [email protected]

Profa. OrientadoraTayana Conte

[email protected]

Page 3: Projeto final presentation

$684 bilhões

em movimentação financeira pela internet nos EUA em 2010fonte: CNN, 2013

Em 2011 no Brasil

população possui computadores

fonte: CETIC, 2011

desse total procura preços na internet e

fizeram ao menos 1 compra no ano29%

59%45%

$10,2 bilhões

movimentação financeira na internet no primeiro semestre 2012fonte: Camara-e.net, 2012

3

Page 4: Projeto final presentation

Conversão - activationMomento em que o usuário faz uso do seu produto ou serviço

Conceito I

4

Page 5: Projeto final presentation

- Sutcliffe et al, 2002

Investimento em usabilidade é essencial para a disputa de atenção do usuário.

- ANSI 2001, ISO 1998

Métricas de usabilidade divididas em três grupos: efetividade, eficiência e satisfação.

5

Page 6: Projeto final presentation

- Sauro et al, 2005

Aumentar a significância de dados de usabilidade, é preciso usar uma única métrica

- Ivory et al, 2001

As métricas para usabilidade não descrevem o comportamento do usuário como de fato é

6

Page 7: Projeto final presentation

Efetividade - effectivenessDentro da usabilidade, define-se como

Conceito II

7

Page 8: Projeto final presentation

Realizar um estudo preliminar para encontrar métodos de avaliação de usabilidade com foco em eficiência e pré-desenvolvimento

e

Encontrar padrões de comportamento de usuários, com fundamento visual, através do case Ingresse

Objetivo

8

Page 9: Projeto final presentation

Revisão Sistemática - preliminar

Que métodos ou ferramentas de avaliação de usabilidade tem sido utilizados para calcular a eficácia de interfaces?

9

Page 10: Projeto final presentation

Extração de conteúdo1. Boas práticas para a criação de interfaces eficazes2. Campos de estudo sobre eficácia de interfaces web3. Tipos de técnicas de avaliação de interfaces4. Modelos de medição de usabilidade

10

Page 11: Projeto final presentation

1996 ~ 2012Início das fortes publicações sobre web engeneering até o ano correntefonte: Fernandez et al, 2010

Pesquisa realizada para o período

Google Schoolarfoi a máquina de busca utilizada, dentre as fontes, destacam-se ACM Digital Library e Science Direct

11

Page 12: Projeto final presentation

WEB (web OR website OR internet OR e-commerce OR mail-marketing) AND

(usability OR usable) AND

(evalu* OR measur* OR stud* OR method* OR techin*) AND

(effect* OR convert*)

USABILITY

EVALUATION

EFFECTIVENESS

Query string

12

Page 13: Projeto final presentation

Artigos que

Critérios de inclusão

- apresentavam definições do conceito de eficácia dentro da usabilidade- descreviam técnicas ou ferramentas de avaliação de interfaces- apresentavam formas de medir usabilidade- apresentavam cases de aplicação de técnicas de avaliação de interfaces

13

Page 14: Projeto final presentation

Artigos

Critérios de exclusão

- apresentando somente definições gerais de usabilidade- apresentando somente técnicas de acessibilidade- introdutórios aos conceitos de usabilidade- não escritos em inglês- com técnicas de medidas de usabilidade feitas especificamente para um tipo de ferramenta

14

Page 15: Projeto final presentation

Critérios de qualidadeordenar os resultados para concentrar nos artigos mais relevantes

15

Page 16: Projeto final presentation

Tabela de pontos

aO estudo apresenta/descreve uma ferramenta ou técnica para avaliação de usabilidade de uma interface

(-1) não(0) descreve(+1) Descreve bem

b O estudo descreve boas práticas de usabilidade para o campo de eficácia(-1) não(0) descreve(+1) descreve bem

c O estudo possui resultados claros ao final(-1) não(0) parcialmente (+1) possui

d O estudo possui publicação recente(-1) até 2000(0) 2000 até 2003(+1) de 2003 em diante

e O estudo define métricas quantitativas de usabilidade(-1) Não(0) Descreve(+1) Descreve bem

16

Page 17: Projeto final presentation

Extração de dados

1 Boas práticas para criação de interfaces eficazesConcepçãoDesenvolvimentoTeste

2 Campos de estudo sobre eficácia de interfaces webTécnicoSubjetivo

3 Tipos de técnica de avaliação de interfaceConceitualDesenvolvimento Empírica

4 Modelos de medição de usabilidade de interfacesQuantitativosQualitativos

17

Page 18: Projeto final presentation

Resultados encontradosRevisão sistemática

18

Page 19: Projeto final presentation

Em números a pesquisa automática encontrou

Artigos lidos para o primeiro filtro

Artigos selecionados no primeiro filtro (descartou-se repetições)38

100

-1 0 1

a 13 12 13

b 28 4 6

c 4 14 20

d 2 14 22

e 28 4 6

19

Page 20: Projeto final presentation

-1 0 1

13 12 13

28 4 6

4 14 20

2 14 22

28 4 6

Rica base de estudos com técnicas de avaliação de usabilidades

Poucos estudos com objetivo de apontar boas práticas estabelecidas

Qualidade alta de resultados encontrados, com sólidos testes dos mesmos

Material com bom índice de atualização.

Quase nenhum estudo apresenta métricas de usabilidade20

Page 21: Projeto final presentation

Estudo de caso comportamentalUsuários Ingresse.com

21

Page 22: Projeto final presentation

FEV ~ MARcom o site e seus usuários reais remotamente

Coleta realizada no período de

ManausSão Paulosão as duas cidades com maior quantidade de pessoas

KISS MetricsCrazy EggForam as duas ferramentas utilizadas para coleta de dados remotamente

22

Page 23: Projeto final presentation

Concentração no objetivo

Elemento de seleção para selecionar

Palavra de ação para o que deseja fazer

23

Page 24: Projeto final presentation

Comportamentos interessantes

Cliques no ícone de mapa

Cliques no ícone de descrição do evento

24

Page 25: Projeto final presentation

25

Page 26: Projeto final presentation

A/B TesteCompra com 1 clique

Taxa de aceitação antes20/semana

Taxa de aceitação depois20/semana

Antes

Depois26

Somente as mudanças visuais não foram suficientes para aumentar conversão neste caso.

Page 27: Projeto final presentation

FEV ~ MARcom os usuários do site

Pesquisa realizada no período deManausé a cidade com maior predominância nas pesquisas

pessoas responderam a pesquisa180

27

Page 28: Projeto final presentation

66,84 %Disseram considerar o pôster do evento, ou a marca do organizador como item relevante para julgar um evento como bom

Co-founding factormarca reconhecida pode ser entendida tanto como logotipo ou renome

28

Page 29: Projeto final presentation

92.6 %

Afirmam que o visual é o primeiro fator de influênciafonte: Loyalty Square

26 %

é a porcentagem a mais de reconhecimento de propagandas coloridasfonte: Hermie, P. Stop/watch: everything on the impact of advertisements in magazines. Medialogue; 2005

92.6 %

Afirmam que o visual é o primeiro fator de influênciafonte: Loyalty Square

26 %

é a porcentagem a mais de reconhecimento de propagandas coloridasfonte: Hermie, P. Stop/watch: everything on the impact of advertisements in magazines. Medialogue; 2005

29

Page 30: Projeto final presentation

A presença de barras de progresso

fonte: Lightspeed Research and Kantar; 2012

Completeness meter

- Melhoram resultados de pesquisa de satisfação- Aumentam engajamento

75 %

26 %

das pessoas preferem a presença de uma barra de progresso

To Dos

_ Hugo Liu, MIT

It turns out that when you finish a complex task, your brain releases massive quantities of endorphins.

30

Page 31: Projeto final presentation

Mapeamento de elementos visuais e o comportamento aferido a estes

Trabalhos futuros

31

Page 32: Projeto final presentation

Resultado que deverá ser entregue como parte do Projeto Final II

Trabalhos futuros

32

Page 33: Projeto final presentation

CASE INGRESSE: UM ESTUDO SOBRE AS TÉCNICAS DE MEDIÇÃO DE USABILIDADE

Ciência da ComputaçãoInstituto de Computação

Universidade Federal do Amazonas

33