faculdade de tecnologia da baixada santista “rubens lara” · sandra oliveira da silva teste de...
TRANSCRIPT
CENTRO ESTADUAL DE EDUCAÇÃO TECNOLÓGICA PAULA SOUZA
Faculdade de Tecnologia da Baixada Santista “Rubens Lara”
Curso Superior de Tecnologia em Sistemas para Internet
TESTE DE USABILIDADE: UM ESTUDO DO SISTEMA INTEGRADO DE GESTÃO
ACADÊMICA (SIGA) NA UNIDADE “RUBENS LARA”
SANTOS
DEZEMBRO/2017
SANDRA OLIVEIRA DA SILVA
TESTE DE USABILIDADE: UM ESTUDO DO SISTEMA INTEGRADO DE GESTÃO
ACADÊMICA (SIGA) NA UNIDADE “RUBENS LARA”
Trabalho de Conclusão de Curso apresen-tado à Faculdade de Tecnologia da Baixada Santista “Rubens Lara”, como exigência par-cial para obtenção do título de Tecnólogo em Sistemas para Internet. Orientadora:Prof.a Ma. Rosemeire Cardozo
Vidal.
SANTOS
DEZEMBRO/2017
SILVA, Sandra Oliveira.
Teste de Usabilidade: Um Estudo do Sistema Integrado de Gestão Acadêmica
(SIGA) na Unidade “Rubens Lara”/ Sandra Oliveira da Silva; Orientadora:Prof.a Ma. Rosemeire
Cardozo Vidal – Faculdade de Tecnologia Rubens Lara, Santos, 2017.
57 f.
Trabalho de Conclusão de Curso – Centro de Educação Tecnológica Paula Souza,
Faculdade de Tecnologia da Baixada Santista “Rubens Lara”, Curso de Sistemas para Internet.
1.Avaliação de Usabilidade 2.Teste de Usabilidade 3. Siga.4.Centro Paula Souza
SILVA, Sandra Oliveira.
SANDRA OLIVEIRA DA SILVA
TESTE DE USABILIDADE: UM ESTUDO DO SISTEMA INTEGRADO DE
GESTÃO ACADÊMICA (SIGA) NA UNIDADE “RUBENS LARA’
Trabalho de Conclusão de Curso apresen-tado à Faculdade de Tecnologia da Baixada Santista “Rubens Lara”, como exigência par-cial para obtenção do título de Tecnólogo em Sistemas para Internet.
Santos, 09 de dezembro de 2017.
Banca Examinadora
Prof.a Ma. Rosemeire Cardozo Vidal – Orientadora
Faculdade de Tecnologia da Baixada Santista “Rubens Lara”
Presidente
Prof.a Ma. Rosana Cammarosano
Faculdade de Tecnologia da Baixada Santista “Rubens Lara”
Prof. Dr. Mauricio Conceição Mario
Faculdade de Tecnologia da Baixada Santista “Rubens Lara”
Dedico à DEUS que está sempre presente em
todos os momentos da minha vida. E em espe-
cial à minha orientadora Rosemeire pelo
carinho e confiança.
AGRADECIMENTOS
À DEUS pela oportunidade que me foi concedida de estar aqui concluindo esse curso
e por todas as coisas boas, que ELE me proporcionou durante o curso.
Aos meus pais por ficarem ao meu lado em todos os momentos, e pelos conselhos e
amor incondicional.
Aos meus amigos e todos que participaram da minha jornada na faculdade.
À minha orientadora Rosemeire por toda ajuda na proporção deste trabalho, sua ori-
entação permitiu que eu pudesse colocar minhas ideias em ordem e concluir esse
trabalho de uma maneira satisfatória.
Aos professores e funcionários da Fatec por tudo que aprendi nesse período que es-
tudei aqui.
Ao grupo de alunos de Gestão Portuária e Logística que se prontificaram a cooperar
com a pesquisa.
"Agradeço todas as dificuldades que enfrentei; não fosse por elas, eu não teria saído do lugar... As facili-dades nos impedem de caminhar. Mesmo as críticas nos auxiliam muito. ”
(Chico Xavier)
RESUMO
SILVA, S.O. Teste de Usabilidade: Um Estudo do Sistema Integrado de Gestão
Acadêmica (SIGA) na Unidade “Rubens Lara”. 2017, 57 f. Trabalho de Conclusão
de Curso de Graduação de Tecnólogo em Sistemas para Internet. Centro Estadual de
Educação Tecnológica Paula Souza, Faculdade de Tecnologia da Baixada Santista
“Rubens Lara”, 2017.
As instituições que utilizam o Sistema Integrado de Gestão Acadêmica buscam novos
saberes e tecnologias que supram as necessidades dos usuários quanto à qualidade
de uso. Para isso, verificou-se a necessidade de cuidados essenciais para interação
do usuário, como e quais as informações estão disponíveis ao usuário no Sistema
Integrado de Gestão Acadêmica. Com a finalidade de garantir a funcionalidade, a efi-
ciência do uso dos recursos oferecidos e uma boa usabilidade nas aplicações foram
utilizados métodos de avaliação de usabilidade envolvendo a preparação dos testes
de usabilidade no sistema com usuários do Curso de Gestão Portuária e Logística. A
metodologia empregada no trabalho se fundamentou nas recomendações de usabili-
dade, requisitos de usabilidade, facilidade de aprendizagem, eficiência, memorização
e satisfação do usuário. As conclusões são apresentadas perante as recomendações
de usabilidade tendo em vista à melhoria da qualidade e a interação do usuário com
a interface no Sistema Integrado de Gestão Acadêmica na unidade Rubens Lara.
Palavra-Chave: Avaliação de Usabilidade. Teste de Usabilidade. Siga. Centro Paula
Souza. Fatec.
ABSTRACT
SILVA, S.O. Teste de Usabilidade: Um estudo do Sistema Integrado de Gestão
Acadêmica (SIGA) na Unidade “Rubens Lara”. 2017, 57 f. Trabalho de Conclusão
de Curso de Graduação de Tecnólogo em Sistemas para Internet. Centro Estadual de
Educação Tecnológica Paula Souza, Faculdade de Tecnologia da Baixada Santista
“Rubens Lara”, 2017.
The institutions that use the Integrated Academic Management System seek new
knowledge and technologies that meet the needs of users regarding quality of use. For
this, it was verified the need for essential care for user interaction, and what information
is available to the user in the Integrated Academic Management System. In order to
guarantee the functionality, efficiency of the use of the resources offered and good
usability in the applications, were used usability evaluation methods involving the prep-
aration of the usability tests in the system with users of the Port Management and
Logistics Course. The methodology used in the work was based on the recommenda-
tions of usability, usability requirements, learning ease, efficiency, memorization and
user satisfaction. The conclusions are presented before the recommendations of usa-
bility in order to improve the quality and the interaction of the user with the interface in
the Integrated System of Academic Management in the Rubens Lara unit.
Keywords: Usability Assessment. Usability Test. Siga. Centro Paula Souza. Fatec.
LISTA DE ABREVIATURAS E SIGLAS
FATEC Faculdade de Tecnologia
OBS STUDIO Open Broadcaster Software
QUIS Questionnaire for User Interaction Satisfaction
SIGA Sistema Integrado de Gestão de Acadêmica
SUMI Software Usability Measurement Inventory
WAMMI Web Local Analysis and Inventory of Measure
LISTA DE FIGURAS
Figura1 Tela de Checklist de Avaliação de Usabilidade....................................19
Figura 2 Resultado do Questionário da Escala Likert........................................20
Figura 3 Ilustração e exemplificação das sessões do QUIS..............................21
Figura 4 Estrutura da Usabilidade - ISSO 9241-11............................................24
Figura 5 Diagrama de Técnicas em Usabilidade................................................25
Figura 6 Página Home do SIGA.........................................................................28
Figura 7 Tarefa: Consultar Histórico....................................................................31
Figura 8 Tarefa: Trocar Senha do SIGA..............................................................32
Figura 9 Tarefa: Consultar Plano de Ensino .......................................................32
Figura 10 Tarefa: Download do Material Didático I.................................................33
Figura 11 Tarefa: Download do Material Didático II................................................33
Figura 12 Tarefa: Download do Material Didático III...............................................34
Figura 13 Tarefa: Calendário de Provas.................................................................34
Figura 14 Tela de Impressão matrícula/rematrícula...............................................35
LISTA DE TABELAS
Tabela 1 Funcionalidades disponíveis no SIGA.................................................29
LISTA DE ILUSTRAÇÕES
Gráfico 1 Tempo de execução Total das Tarefas..............................................41
Gráfico 2 Quantidade de Acertos de Tarefas.....................................................42
Gráfico 3 Experiência do usuário com matrícula/rematrícula.............................43
Gráfico 4 Questão 1: Perfil dos Participantes.....................................................43
Gráfico 5 Questão 2: Faixa etária de idade dos Participantes............................44
Gráfico 6 Questão 3,4: Modalidade de Curso.....................................................44
Gráfico 7 Questão 5: Frequência de acesso ao SIGA........................................45
Gráfico 8 Questão 6: É fácil realizar matrícula no SIGA.....................................46
Gráfico 9 Questão 7: É fácil mover no SIGA.......................................................46
Gráfico 10 Questão 8: É fácil encontrar o que eu quero no SIGA.........................47
Gráfico 11 Questão 9: O SIGA precisa de explicação introdutória........................47
Gráfico 12 Questão 10: O SIGA me ajuda o que eu estou procurando.................48
Gráfico 13 Questão 11: O SIGA é lento.................................................................48
Gráfico 14 Questão 12: Encontrar o caminho de volta no SIGA é um problema...49
SUMÁRIO
1 INTRODUÇÃO ....................................................................................................... 15
1.1 JUSTIFICATIVA DO TEMA ................................................................................. 15
1.2 PROBLEMA DA PESQUISA ............................................................................... 16
1.3 OBJETIVOS ........................................................................................................ 16
1.3.1 Objetivo geral ................................................................................................. 16
1.3.2 Objetivos específicos ..................................................................................... 16
1.4 PROCEDIMENTOS METODOLÓGICOS ............................................................ 17
1.5 ORGANIZAÇÃO DA MONOGRAFIA .................................................................. 17
2 REFERENCIAL TEÓRICO ..................................................................................... 19
2.1 AVUSABILITY : UMA APLICAÇÃO PARA APOIAR A AVALIAÇÃO DE
USABILIDADE DE INTERFACES DA WEB...............................................................19
2.1.1 Avaliação e Interação de um Sistema de Gestão Acadêmica: Um estudo
de Caso......................................................................................................................20
2.1.2 Análise de Satisfação do usuário:Estudo de Caso utilizando o Relatório
de Atividades de Docentes (RAD) do Sistema Integrado de Gestão(SIG) de uma
Instituição de Ensino .............................................................................................. 21
3 USABILIDADE ....................................................................................................... 23
3.1 CONCEITO DE USABILIDADE ........................................................................... 23
3.1.1 Metodologia de Avaliação de Usabilidade ................................................... 24
3.1.2 Métodos de Testes com o Usuário............................................................... 25
3.1.2.1Técnicas Prospectivas....................................................................................26
3.1.2.2 Técnicas Preditivas........................................................................................26
3.1.2.3 Técnicas Objetivas.........................................................................................26
3.1.2.4 Entrevistas e Questionários de Avaliação de Usabilidade.............................27
4 ESTUDO DE CASO................................................................................................28
4.1 O SISTEMA INTEGRADO DE GESTÃO ACADÊMICA(SIGA)............................28
4.2 TESTES DE USABILIDADE SIGA.......................................................................30
4.2.1 Etapa 1- Teste com Tarefas Pré-Definidas....................................................30
4.2.2 Etapa 2- Teste e Inspeção de Tela.................................................................35
4.2.3 Etapa 3 - Aplicação do Questionário.............................................................37
5 RESULTADOS.......................................................................................................38
5.1 RESULTADOS:ETAPA 1 – TESTE COM TAREFAS PRÉ-DEFINIDAS.............38
5.2 RESULTADOS: ETAPA 2 – TESTE DE INSPEÇÃO DE TELA..........................42
5.3 RESULTADOS: ETAPA 3 - APLICAÇÃO DO QUESTIONÁRIO........................43
6 CONCLUSÃO E DISCUSSÃO .............................................................................51
6.1 PASSOS FUTUROS...........................................................................................51
REFERÊNCIAS........................................................................................................52
ANEXO A – QUESTIONÁRIO WAMMI – WEB LOCAL ANALYSIS AND
INVENTORY OF MEASURE...................................................................................54
CENTRO ESTADUAL DE EDUCAÇÃO TECNOLÓGICA PAULA SOUZA
Faculdade de Tecnologia da Baixada Santista “Rubens Lara”
Curso Superior de Tecnologia em Sistemas para Internet
TESTE DE USABILIDADE: UM ESTUDO DO SISTEMA INTEGRADO DE GESTÃO
ACADÊMICA (SIGA) NA UNIDADE “RUBENS LARA”
Santos
Dezembro/2017
15
1 INTRODUÇÃO
A Gestão Acadêmica da Instituição de Ensino Faculdade de Tecnologia “Ru-
bens Lara” é apoiada pelo Sistema Integrado de Gestão Acadêmica (Siga),
desenvolvido para plataforma Web, com o objetivo de controlar as atividades dos do-
centes e discentes. Considerando este cenário, entende-se que a produção dos
recursos didáticos na Web vai além de planejamento de ensino, requerendo um de-
sign e senso estético em sua elaboração, afim de atender as necessidades dos
usuários quanto a qualidade de uso, a que se chama de usabilidade. Os requisitos
de usabilidade que justificam a qualidade de uso, devem ser observados durante a
realização das ações dos usuários no sistema e posteriormente analisados para que
possam ser adequadamente corrigidos de acordo com as expectativas.
Segundo Nielsen e Loranger (2007, p. 16) afirmam que:
”A usabilidade é um atributo de qualidade relacionado à facilidade do uso de algo. Mais especificamente, refere-se à rapidez com que os usuários podem aprender a usar alguma coisa, a eficiência deles ao usá-la, o quanto lembram daquilo, seu grau de propensão a erros e o quanto gostam de utilizá-la. ”
Uma página Web deve ser clara e intuitiva onde os usuários encontram o que
procuram de uma forma fácil, rápida e eficaz.
Diante do exposto, este trabalho tem como objetivo apresentar uma análise
de usabilidade no Sistema Integrado de Gestão Acadêmica (SIGA) da Faculdade de
Tecnologia “Rubens Lara”, com o intuito de mensurar a qualidade de uso do sistema.
1.1 JUSTIFICATIVA DO TEMA
O Sistema Integrado de Gestão Acadêmica (SIGA) é atualmente utilizado em
todas as Fatecs. Através do SIGA todos os envolvidos como alunos, professores, se-
cretaria, podem inserir dados e acessar as informações acadêmicas em um único
local. Desta forma a de se considerar que o SIGA, por se tratar de um sistema que
atende a uma diversidade de usuários com necessidades diferenciadas, possua uma
interface adequadamente implementada, permitindo uma interação fácil e segura. No
16
entanto a atenção com a qualidade de uso, ainda é negligenciada, colocando todos
os esforços, durante o projeto do sistema, apenas nas suas funcionalidades.
Segundo Santos (2002), as deficiências na usabilidade propiciam erros du-
rante a operação dos sistemas e trazem dificuldades para os usuários.
Considerando algumas dificuldades reportadas pelo corpo discente na intera-
ção com o SIGA da unidade “Rubens Lara”, justifica-se a proposta deste projeto em
realizar testes de usabilidade no sistema visando a qualidade de uso de acordo com
os requisitos de usabilidade: eficiência, eficácia, segurança, aprendizagem, utilidade,
memorização.
1.2 PROBLEMA DA PESQUISA
Através do Sistema Integrado de Gestão Acadêmica (SIGA), os discentes po-
dem efetuar a matrícula semestralmente, ter acesso a grade de horários, notas e perfil
curricular.
Quanto ao manuseio da plataforma, segundo relato dos alunos, não é intuitivo
e exige memorização das várias etapas. Algumas dificuldades reportadas para a fun-
cionalidade rematrícula: muito extensa, informações dispersas na tela, não oferece
feedback.
1.3 OBJETIVOS
1.3.1 Objetivo geral
O objetivo deste trabalho é apresentar uma análise, utilizando técnicas de
avaliação de usabilidade, no Sistema Integrado de Gestão Acadêmica (SIGA) da uni-
dade “Rubens Lara”, com o intuito de mensurar a qualidade de uso do sistema.
1.3.2 Objetivos específicos
Para alcançar o objetivo geral foram definidos 4 objetivos específicos:
17
a) Observação do processo de interação aluno-interface no Sistema de
Integrado de Gestão Acadêmica (SIGA) da unidade “Rubens Lara” através de tarefas
pré-definidas.
b) Levantamento das impressões dos usuários a respeito do Sistema de
Integrado de Gestão Acadêmica.
c) Obtenção de métricas dos requisitos de usabilidade tais como: efici-
ência, eficácia, segurança, aprendizagem, utilidade, memorização.
d) Análise dos dados obtidos dos testes.
1.4 PROCEDIMENTOS METODOLÓGICOS
A pesquisa é, de caráter tecnológico quantitativo e qualitativo, contendo as
seguintes etapas: será realizado uma revisão bibliográfica da literatura sobre o tema
buscando compreender os conceitos de usabilidade, métodos de avaliação da usabi-
lidade.
Foram realizadas coletas de dados com os alunos dos cursos de Gestão Por-
tuária e Logística. A análise dos resultados obtidos neste trabalho, poderá servir como
guia em avaliações do Sistema de Gestão Acadêmica possibilitando a melhora da
interação dos alunos com a plataforma.
1.5 ORGANIZAÇÃO DA MONOGRAFIA
Este trabalho está estruturado em seis capítulos. No primeiro capítulo será
abordada a definição da plataforma (SIGA), sua importância quanto aos objetivos e
metas da instituição.
No segundo capitulo pesquisas similares de usabilidade em sistemas para
ambiente acadêmico.
No terceiro capítulo definições, conceitos, técnicas e formas de avaliação de
usabilidade.
No quarto capítulo serão apresentados os testes de usabilidade no SIGA na
Faculdade de Tecnologia Rubens Lara.
18
No quinto capítulo os resultados obtidos nos testes, pelos alunos de Gestão
Portuária e Logística.
No sexto e último capítulo, as conclusões discorrendo sobre os objetivos es-
tabelecidos, bem como as considerações finais.
19
2 REFERENCIAL TEÓRICO
Neste capítulo será apresentada uma análise mais detalhada dos conceitos,
bem como a correlação entre trabalhos semelhantes, quanto aos métodos de avalia-
ção de usabilidade.
2.1 AVUSABILITY: UMA APLICAÇÃO PARA APOIAR A AVALIAÇÃO DE
USABILIDADE DE INTERFACES DA WEB
Neste estudo de caso é apresentado uma aplicação desenvolvida para avaliar
a funcionalidade do software AvUsability, ferramenta para identificar problemas de
usabilidade em interfaces na Web. Para esse fim, foi feita avaliação de usabilidade na
aplicação SIGAA (Sistema Integrado de Gestão de Atividades Acadêmicas), da UFS
(Universidade Federal de Sergipe), usando o AvUsability.
Os participantes foram requisitados a avaliar a usabilidade do SIGAA através
do Checklist da aplicação AvUsability. Na figura 1 é apresentada a tela do Checklist
utilizada no trabalho.
Checklist é uma técnica de baixo custo, de rápida execução, que otimiza e
facilita a identificação de problemas de usabilidade e que pode ser adaptada para
atender a diferentes contextos de uso (WINCKLER, 2001).
Figura 1- Tela de Checklist de Avaliação de Usabilidade
Fonte: http://revistageintec.net/portal/index.php/revista/article/view/303/353.
20
2.1.1 Avaliação e Interação de um Sistema de Gestão Acadêmica: Um Estudo de
Caso
No contexto, deste trabalho é apresentado a avaliação de interface e interação
do Sistema Acadêmico MeuIFMU que é utilizada na instituição de ensino Instituto Fe-
deral de Minas Gerais (IFMG). Para isso foi utilizado o framework DECIDE, que é uma
estrutura para guiar uma avaliação.
Segundo Preece et al (2005, p.368) DECIDE é um framework formado por
seis etapas, e as iniciais de cada etapa estabelece sua nomenclatura: determina as
metas e os objetivos da avaliação, explora e determina a avaliação, escolhe métodos
e técnicas, identifica questões práticas na avaliação, decidi como lidar com as ques-
tões éticas envolvidas e por fim avalia, interpreta e apresentam os dados.
O Questionário utilizado neste estudo, foi o modelo de Likert, que possibilita
mensurar as atitudes e identificar o grau de conformidade dos usuários, através de
suas opiniões. O gráfico dos resultados do Likert, podem ser observados na figura 2.
Figura 2-Resultado do Questionário da Escala Likert
Fonte: https://siaiap32.univali.br/.
21
2.1.2 Análise de Satisfação do usuário: Estudo de Caso utilizando o Relatório de
Atividades de Docentes (RAD) do Sistema Integrado de Gestão (SIG) de uma
Instituição Pública de Ensino
O Sistema de Relatório de Atividades de Docentes (RAD) é um dos módulos
que constituem o Sistema Integrado de Gestão de uma Instituição Pública de Ensino,
tem como objetivo gerenciar e controlar as atividades de ensino, pesquisa, extensão
e administração. Neste trabalho o questionário QUIS (Questionnaire for User Interac-
tion) foi utilizado com o objetivo de coletar o grau de satisfação dos docentes, quanto
aos relatórios das atividades gerados no sistema de gestão da instituição. O QUIS, é
um questionário para medir a satisfação do usuário relacionado à usabilidade de sof-
tware, de maneira padronizada segura e válida. Na figura 3, é ilustrada e exemplificada
uma das sessões do QUIS.
Segundo Shneiderman (1988) o QUIS foi projetado para avaliar a satisfação
subjetiva dos usuários com aspectos específicos da interface humano-computador.
Figura 3 – Exemplo de uma das sessões do QUIS
Fonte: http://repositorio.ufla.br/bitstream/1/5360/1/.
22
Em relação a correlação entre os trabalhos apresentados foi observado que
os estudos de caso permitiram comprovar a simplicidade e eficácia das ferramentas
utilizadas: Checklists , Framework DECIDE e Questionários na identificação dos pro-
blemas de usabilidade das aplicações Web analisadas, bem como no fornecimento
de sugestões de correções para cada um dos problemas identificados.
23
3 USABILIDADE
Neste tópico serão apresentados, a partir de pesquisa bibliográfica, uma revi-
são literária sobre o conceito de usabilidade seguidos do processo de técnicas e
avaliação de usabilidade em interfaces Web utilizadas na realização do presente pro-
jeto.
3.1 CONCEITO DE USABILIDADE
Segundo Nielsen (1993), a usabilidade tem como finalidade disponibilizar in-
terfaces que permitam uma interação fácil, agradável, com eficácia e eficiência. A
eficácia diz respeito a quanto que o sistema é bom em fazer o que se espera dele e a
eficiência quanto que o sistema auxilia o usuário na realização das tarefas.
Para Nielsen (1993), a usabilidade é avaliada observando os seguintes requi-
sitos:
a) Facilidade de aprendizagem - O usuário consegue entender o sistema
e realizar suas tarefas.
b) Eficiência - O sistema deve maximizar a produtividade, proporcionar
a realização de uma atividade de forma rápida e eficiente
c) Memorização – as interfaces devem retratar facilidade de memoriza-
ção possibilitando que os usuários consigam utilizá-lo mesmo depois de um longo
intervalo de tempo.
d) Erros – É necessário minimizar os erros, a interface deve informar ao
usuário o erro e facilitar a correção de modo fácil.
e) Satisfação – O sistema deve oferecer uma experiência agradável aos
usuários, proporcionando uma interação satisfatória.
A ISO 9241-11(1988) diz que para especificar ou medir usabilidade “ é neces-
sário identificar os objetivos e decompor eficácia, eficiência e satisfação e os
componentes do contexto de uso em subcomponentes com atributos mensuráveis e
verificáveis”. Na figura 4 pode-se observar como esses componentes se relacionam.
24
Figura 4 – Estruturada Usabilidade (ISSO 9241-11).
Fonte : Norma ISO 9241/11(1988).
3.1.1 Metodologia de Avaliação de Usabilidade
Segundo Dumas et al. (1993) avaliar a usabilidade dos sistemas refere-se ao
método que tem como intuito de medir as características de interação entre o usuário
e o sistema, de acordo com parâmetros como por exemplo, tempo gasto para execu-
ção das tarefas predefinidas e as taxas dos erros.
Há diversos métodos de avaliação de usabilidade, cada um dispõe de suas
características, além de vantagens e desvantagens, que deverão ser escolhidos de
acordo com os objetivos da pesquisa. A seleção do método adequado para realização
da avaliação dependerá dos objetivos esperados e dos recursos disponíveis
(LEITE,2007).
É de suma importância conhecer cada um dos métodos e suas diferenças
para auxiliar na escolha do mais apropriado.
25
3.1.2 Métodos de Testes com o Usuário
Os testes com usuários buscam prever dificuldades de aprendizado e o tempo
de execução de tarefas na operação do sistema, diagnosticar o que pode estar em
desconformidade com os padrões implícitos e explícitos de usabilidade, constatar, ob-
servar e registrar problemas efetivos de usabilidade durante a interação, calcular
métricas objetivas para eficácia, eficiência e produtividade do usuário na interação
com o sistema. Além de conhecer a opinião do usuário em relação ao sistema, sugerir
as prioridades de problemas de usabilidade, com base nos resultados dos testes
(PÓVOA,2004).
Os métodos de avaliação de usabilidade são compostos de técnicas que po-
dem ser baseadas em questionários, modelos formais, base de conhecimento,
checklists, ensaios de interação ou sistemas de monitoramento (CYBIS,2003), todas
elas apresentando suas limitações, vantagens e desvantagens.
As técnicas desenvolvidas para avaliação de usabilidade podem ser classifi-
cadas quanto ao seu objetivo para esta classificação foi determinado três classes
distintas: técnicas de prospectivas ou empíricas, técnicas prospectivas e técnicas pre-
ditivas ou diagnósticas. Na figura 5, são apresentadas as técnicas de avaliação de
usabilidade segundo sua classificação.
Figura 5- Diagrama de Técnicas em Usabilidade
Fonte: Elaborado pela autora (2017).
26
3.1.2.1 Técnicas Prospectivas
As Técnicas Prospectivas estão fundamentadas na aplicação de questioná-
rios, entrevistas com o usuário para a avaliar sua satisfação em relação ao sistema e
sua operação. O questionário é elaborado para ser configurado de acordo com as
necessidades de cada análise de interface, incluindo unicamente as questões que
interessam para a análise proposta. (Norman,1989).
3.1.2.2 Técnicas Preditivas
As Técnicas Preditivas dispensam a ação direta dos usuários nas avaliações,
que se apoiam em verificações e inspeções de interpretações intermediárias de sof-
tware e interativo, feitas pelos desenvolvedores ou especialistas em usabilidade. Elas
podem ser classificadas como: avaliações analíticas, avaliações heurísticas e inspe-
ções por Checklist (CYBIS,2003).
3.1.2.3 Técnicas Objetivas
Consistem em observar e monitorar a interação do usuário com o sistema em
um ambiente parcialmente controlado (laboratório), através da execução de uma se-
leção de atividades em determinada funcionalidade da aplicação (PRATES &
BARBOSA,2003).
Neste trabalho será utilizada a combinação das técnicas prospectivas e obje-
tivas. A técnica prospectiva utilizada será o questionário para medir o grau de
satisfação do usuário, através de pontuações pré-estabelecidas de acordo com as
respostas assinaladas pelos participantes.
A técnica objetiva será aplicada em ambiente laboratorial e a execução de
atividades pré-estabelecidas diretamente na aplicação e em segundo momento em
telas impressas em papel.
27
3.1.2.4 Entrevistas e Questionários de Avaliação de Usabilidade
Através de entrevistas e questionários é possível o avaliador obter informa-
ções, registrar experiências, opiniões e preferências dos usuários que interagem com
o sistema avaliado. As entrevistas proveem uma maneira clara entre o avaliador e o
usuário, por isso torna-se mais fácil para o avaliador detectar sentimentos, percep-
ções, ideias e satisfação do usuário.
Segundo Preece et al (1994) o questionário não envolve interação direta entre
o avaliador e o usuário, consequentemente acaba sendo o método mais adequado
por oferecer a vantagem de atingir um grande número de pessoas, podendo obter
resultados estatísticos significantes.
Os questionários são elaborados essencialmente para obter informações
quanto as interfaces dos sistemas, com o objetivo de identificar a satisfação dos usu-
ários com relação a usabilidade. Servem para medir o grau de satisfação de uso em
relação ao produto, que deve ser convertido em hipóteses conhecidas e quantificáveis
de validade e confiabilidade. Dentre os questionários de usabilidade existentes utiliza-
dos para medir a satisfação dos usuários das interfaces na Web, destacam-se:
a) SUMI-Software Usability Measurement Inventory
SUMI é um teste para obtenção de informações sobre a qualidade de software
em face da visão do usuário (http://sumi.ucc.ie/).
b) WAMMI-Web Local Analysis and Inventory of Measure
WAMMI é uma ferramenta de avaliação para websites com objetivo de obter
informações sobre a satisfação dos usuários, baseado em suas reações ao interagi-
rem com os websites. (http://wwww.wammi.com/).
c) QUIS – Questionnaire for User Interaction Satisfaction
Avaliar a satisfação do usuário em relação à usabilidade de produtos de sof-
tware de maneira específica, segura e válida. (QUIS/index.html).
28
4 ESTUDO DE CASO
Neste capítulo será apresentado um estudo de avaliação de usabilidade rea-
lizado no Sistema Integrado de Gestão Acadêmica (SIGA) com alunos matriculados
nos cursos de Gestão Portuária e Logística.
4.1 O SISTEMA INTEGRADO DE GESTÃO ACADÊMICA (SIGA)
Os testes de usabilidade foram realizados nos meses de outubro e novembro
no laboratório de Informática da Faculdade de Tecnologia “Rubens Lara” com 18 alu-
nos do curso de Gestão Portuária e Logística.
Na figura 6, é apresentada a página inicial (home) do SIGA, visualizada logo
após a entrada no sistema.
Figura 6 – Página Home do SIGA
Fonte: www.siga.cps.sp.gov.br/aluno/home.
29
Na tabela 1 são listados os menus, os submenus e a descrição das respectivas fun-
ções.
Tabela 1-Funcionalides disponíveis no SIGA
Menu Submenus Descrição
Matrícula
Matrícula fechada
Apresenta a tela de matrícula durante o pe-ríodo pré-estabelecido em calendário acadêmico. O aluno seleciona as discipli-nas que deseja cursar, por ordem de prioridade.
Consultas
Intercâmbio
Apresenta o site do Centro Paula Souza in-formando com funciona o intercâmbio.
Histórico Grade
Apresenta a tela com caixas identificadas por cores: caixa verde (representa as disci-plinas que o aluno foi aprovado, caixa azul (disciplinas que o aluno está cursando), caixa branca (disciplinas que o aluno não está cursando) e caixa vermelha (as disci-plinas que o aluno foi reprovado por falta).
Histórico Completo
Apresenta o histórico com informações: si-gla da disciplina, nome da disciplina, período aprovado, média, frequência e ob-servações.
Horário
Apresenta a tela com as siglas das discipli-nas, turmas, professores e dias da semana com seus respectivos horários.
Notas Parciais
Apresenta o extrato de notas parciais con-tendo notas da P1, P2 e P3, média final, quantidade de faltas, % frequência e resul-tados.
Agenda
Calendário de Provas
Apresenta a tela contendo as seguintes in-formações: sigla da disciplina, nome da disciplina, nome do professor e datas das provas.
30
Agenda
Calendário Acadêmico
Apresenta o calendário de janeiro a de-zembro com feriados.
Segurança
Troca de Senha
Tela com campos para o aluno colocar a se-nha antiga e senha atual e confirmar a senha nova.
Solicitações
Documentos Revisão de notas e faltas
Apresenta a tela para solicitação de docu-mentos como: protocolo e pedido de exame. Apresenta a tela para solicitação de revisão de notas e faltas.
Plano de Ensino
Disciplinas do Curso
Apresenta as disciplinas que o aluno está cursando. E ao clicar em uma disciplina o aluno poderá fazer download do material di-dático.
Fonte: Elaborado pela autora (2017).
4.2 TESTES DE USABILIDADE – SIGA
Os testes de usabilidade foram divididos em 3 etapas, com as seguintes téc-
nicas aplicadas: objetiva – com realização de tarefas pré-definidas e inspeção de
reconhecimento de telas; e prospectiva – aplicação de questionário.
4.2.1 Etapa 1 – Testes com Tarefas Pré-Definidas
No primeiro momento foi aplicada a técnica objetiva, com interação direta no
SIGA. Foram realizadas as seguintes tarefas:
1) Consultar histórico.
2) Trocar a senha do SIGA.
3) Consultar o plano de ensino e download do material didático.
4) Consultar calendário de provas.
31
As tarefas foram elaboradas levando em consideração as principais funciona-
lidades do SIGA, na área do aluno. Todas as telas com as ações executadas pelos
alunos, durante a realização das tarefas, foram capturadas através da ferramenta
OBS Studio, com o intuito de posteriormente serem analisadas para apoiar a avaliação
qualitativa do teste. A seguir serão ilustradas algumas telas desta etapa de teste.
Na figura 7, “Consultar Histórico” é apresentado um histórico com informações
da sigla da disciplina, nome da disciplina, período de aprovação, média final, frequên-
cia (%) e observações do aluno.
Figura 7 –Tarefa: Consultar Histórico
Fonte:www.siga.cps.sp.gov.br/aluno/historico.
Na figura 8, “Trocar Senha” é apresentada a tela com campos para o aluno
preencher a senha antiga e a senha atual e confirmar a nova senha, finalizado o pro-
cesso a senha.
32
Figura 8-Tarefa: Trocar Senha do SIGA
Fonte: www.siga.cps.sp.gov.br/aluno/trocasenha.
Na figura 9, é apresentada a tela para a realização da tarefa: “Consultar Plano
de Ensino”.
Figura 9-Tarefa: Consultar Plano de Ensino
Fonte:www.siga.cps.sp.gov.br/aluno/planoensino.
33
Na figura 10, “Fazer Download do Material Didático” é apresentada a tela da
disciplina escolhida pelo aluno para baixar o arquivo do material didático.
Figura 10-Tarefa: Download do Material Didático I
Fonte:www.siga.cps.sp.gov.br/aluno/planoensino.
Na figura 11, são disponibilizadas: as aulas, anotações e materiais didáticos
para download.
Figura 11-Tarefa: Download do Material Didático II
Fonte:www.siga.cps.sp.gov.br/aluno/planoensino.
34
Na figura 12, são apresentados os detalhes do arquivo para Download.
Figura 12 –Tarefa: Download do Material Didático III
Fonte:www.siga.cps.sp.gov.br/aluno/planoensino.
Na figura 13, “Calendário de Provas” são apresentadas as seguintes informa-
ções: sigla, nome da disciplina, datas previstas das provas.
Figura 13-Tarefa: Calendário de Provas
Fonte:www.siga.cps.sp.gov.br/aluno/calendarioprovas.
35
4.2.2 Etapa 2 – Testes de Inspeção de Tela
Nesta etapa foi entregue aos alunos a tela impressa, da matrícula/rematrícula
figura 14. O motivo pelo qual os testes foram realizados com a tela impressa, foi devido
ao período da matrícula/rematrícula não estar disponível no período dos testes.
Figura 14 – Tela de impressão matrícula/rematrícula SIGA.
Fonte:www.sigacentropaulasouza.com.br
Neste momento os participantes (alunos) foram orientados a simular as
seguintes tarefas:
1) Identificar o status das disciplinas de acordo com as cores
O aluno deveria através das cores identificar as disciplinas disponíveis para
matrícula(caixa branca), disciplinas selecionadas porém não confirmadas na matricula
(caixa amarela) e por fim as disciplinas bloqueadas devido ao ciclo corrente do aluno
(caixa vermelha).
36
2) Realizar matrícula /rematrícula
Os alunos foram convidados a reproduzir as ações realizadas para fazer a
matrícula.Os passos realizados deveriam seguir o seguinte fluxo:
2.1- Selecionar a disciplina na caixa branca.
2.2- Identificar o botão matricular selecionadas.
2.3- Validar a disciplina selecionada na caixa de cor amarela.
2.4- Confirmar matricula.
3) Desmatricular uma disciplina
As ações esperadas para realização desta tarefa seriam:
3.1-Selecionar a disciplina previamente matriculada na caixa de cor amarela.
3.2- Identificar o botão Desmatricular Selecionadas ou
3.2.1- Desmatricular Tudo para todas as disciplinas selecionadas.
4) Matricular o semestre todo
4.1- Selecionar o semestre desejado.
4.2- Identificar o botão Matricular Semestre.
Ao final das tarefas, foram convidados a responderem o questionário WAMMI
(Anexo A).
Segundo PADILHA (2004, P.35), os questionários podem servir de diversas
maneiras ao desenvolvimento de interfaces Web:
a) Identificação do perfil do usuário – Coletar informações de origem fun-
cional, pessoal, sobre preferências e sistemas. Outras questões podem ser
adicionadas para fins específicos de avaliação.
b) Determinação do grau de satisfação dos usuários com relação a in-
terface. Questionários específicos para descobrir a satisfação dos usuários vêm sendo
utilizados para sites como o Questionário WAMMI.
37
c) Estruturação das informações sobre problemas de usabilidade identi-
ficados pelos usuários.
4.2.3 Etapa 3 – Aplicação do Questionário
Após realizar as tarefas anteriormente citadas, os alunos responderam ao
questionário WAMMI. Este questionário foi escolhido por ter sido desenvolvido espe-
cificamente para avaliação de teste de usabilidade para websites. As questões do
WAMMI foram elaboradas de modo que fosse possível avaliar os requisitos de usabi-
lidade: eficiência, eficácia, memorização, erro, aprendizagem.
38
5 RESULTADOS
Neste capítulo serão apresentados os resultados dos testes em separado, de
acordo com cada etapa realizada.
5.1 RESULTADOS: ETAPA 1 – TESTES COM TAREFAS PRÉ-DEFINIDAS
O primeiro teste de usabilidade realizado com os participantes (alunos) teve
como objetivo identificar a facilidade de aprendizagem e a satisfação dos usuários,
em relação à interface do Sistema Integrado de Gestão Acadêmica (SIGA).
A seguir, uma descrição detalhada das ações realizadas pelos 18 alunos par-
ticipantes dos testes de usabilidade.
O participante 1 na primeira tarefa acessar o “Histórico”, acessou “Histórico
Grade” e depois executou as tarefas pré-definidas conforme sua experiência no sis-
tema SIGA, obteve êxito na realização das tarefas. O tempo de execução de todas as
tarefas foi de 3 minutos.
O participante 2 conseguiu realizar as duas primeiras tarefas com sucesso,
porém na terceira tarefa “Plano de Ensino” ficou confuso e acessou duas vezes outra
tarefa que não estava pré-definida “Solicitações” isso fez com que o usuário demo-
rasse muito tempo para efetuar as outras tarefas a serem realizadas, o tempo de
execução de todas as tarefas foi de 5 minutos.
O participante 3 conseguiu realizar todas as tarefas com êxito sem problema
em realiza-las. O tempo de execução foi de 3 minutos.
O participante 4 conseguiu realizar todas as tarefas com sucesso seguindo os
passos corretos para execução de cada tarefa. O tempo de execução das tarefas foi
de 2 minutos.
O participante 5 ao executar a primeira tarefa ficou muito tempo na mesma
tela parado e somente depois conseguiu executa-la. Na segunda tarefa também ficou
39
um tempo superior em relação aos demais participantes, e na terceira tarefa, clicou
em “Plano de Ensino”, porém não executou a ação“ Fazer Download do Material Di-
dático”, prosseguindo para quarta tarefa ”Calendário de Provas” efetuada com êxito.
O tempo de execução das tarefas foi de 4 minutos.
O participante 6 clicou na primeira tarefa” Horários” e depois retornou e reali-
zou a tarefa correta” Histórico” conseguiu realizar a segunda tarefa ”Trocar Senha”,
porém na terceira tarefa “Plano de Ensino” clicou duas vezes, e não realizou a tarefa
de “Fazer Download do Material Didático”, em seguida realizou a quarta tarefa “Ca-
lendário de Provas” com sucesso. O tempo de execução foi de 2 minutos.
O participante 7 conseguiu executar a primeira tarefa, a página demorou para
fazer o carregamento, já na segunda tarefa o mesmo ficou muito tempo parado na
tela, na terceira tarefa não clicou em “Plano de Ensino” e não fez “Download do Ma-
terial Didático” e na tentativa de realizar a quarta tarefa se enganou, ”Calendário de
Provas” com “Notas Parciais” clicando duas vezes em “Notas Parciais”. O tempo de
execução das tarefas foi de 4 minutos.
O participante 8 conseguiu realizar as três primeiras tarefas com êxito, porém
a tarefa de “Fazer o Download do Material Didático” não foi realizada. O tempo de
execução das tarefas foi de 2 minutos.
O participante 9 conseguiu realizar todas as tarefas com facilidade executou
”Download do Material Didático” com sucesso. O tempo de execução total das tarefas
foram de 2 minutos.
O participante 10 conseguiu realizar todas as tarefas com êxito, sem proble-
mas identificados. O tempo de execução total foi de 2 minutos.
O participante 11 não conseguiu realizar a tarefa “Consultar Histórico” clicou
em “Histórico (Grade) ” e seguidamente foi para segunda tarefa “Trocar Senha”. Na
terceira tarefa” Consultar Plano de Ensino” clicou duas vezes na tentativa de “Fazer o
40
Download Material Didático”, depois de algum tempo clicou em uma disciplina e con-
seguiu baixar o arquivo com sucesso e por fim finalizou com êxito a quarta tarefa. O
tempo de execução das tarefas foi de 4 minutos.
O participante 12 clicou em “Menu” e depois clicou “Matrícula”, após as duas
ações conseguiu efetuar as duas primeiras tarefas com êxito, clicou várias vezes em
‘Plano de Ensino” e depois clicou em algumas disciplinas, mas não efetuou o Down-
load do Material Didático, passando para a quarta tarefa “Calendário de provas” com
sucesso. O tempo de execução foi de 2 minutos.
O participante 13 conseguiu realizar todas tarefas e não encontrou dificulda-
des. O tempo de execução foi de 2 minutos.
O participante 14 encontrou dificuldade em executar a primeira tarefa clicou
em “Histórico (Grade) ” e depois de algum tempo clicou no “”Histórico Completo”, con-
seguiu realizar a tarefa “Trocar a Senha”. Na terceira tarefa, clicou em “Plano de
Ensino” e em todas disciplinas fez essa ação várias vezes, mas não baixou o arquivo
com êxito. O tempo de execução das tarefas foi de 4 minutos.
O participante15 conseguiu realizar todas tarefas com facilidade. Clicou em
“Histórico Completo”, “Trocar a Senha”, Plano de Ensino e efetuou o “Download do
Material Didático” e por fim consultou o “Calendário de Provas” com sucesso. O tempo
de execução foi de 2 minutos.
O participante 16 conseguiu realizar as duas primeiras tarefas, clicou em
“Plano de Ensino” e em todas disciplinas, porém não fez o “Download do Material
Didático”, realizou a quarta tarefa “Calendário de Provas”. O tempo de execução foi
de 3 minutos.
O participante 17 conseguiu realizar com facilidade as tarefas” Consultar His-
tórico “e ”Trocar Senha” clicou em “Plano de Ensino” porém demorou um tempo nesta
tela e em seguida clicou em Gestão de Estoques e Métodos Quantitativos de Gestão,
41
mas não realizou “Download do Material Didático”, por fim consultou o “Calendário de
Provas”. O tempo de execução das tarefas foi de 5 minutos.
O participante 18 conseguiu realizar as três primeiras tarefas com êxito, porém
a quarta tarefa ” Consultar Calendário de Provas” confundiu com “Notas Parciais” e
não retornou para executar a tarefa corretamente.
No gráfico 1 é apresentado o tempo total de execução das tarefas, por parti-
cipante, no teste de usabilidade no SIGA.
Gráfico 1-Tempo de Execução Total das Tarefas
Fonte: Elaborado pela autora (2017).
No gráfico 2 é apresentado a quantidade de acertos dos participantes em re-
lação a execução de cada tarefa pré-definida.
42
Das tarefas executadas a que mais apresentou acertos, com percentual de
100%, foi “Trocar a Senha”, seguindo de 94,44% para “Consultar o Histórico” e 83,33%
para “Consultar Calendário de Provas” e 44,44% para “Consultar Plano de Ensino” e
fazer “Download do Material Didático”.
Gráfico 2- Quantidade de Acertos de Tarefas
Fonte: Elaborado pela autora (2017).
5.2 RESULTADOS: ETAPA 2 – TESTE DE INSPEÇÃO DE TELA
Na segunda etapa do teste de usabilidade teve como intuito testar a “memo-
rização”, requisito de usabilidade que corresponde a quanto que o sistema é fácil de
lembrar depois de um tempo sem utilizá-lo.
Das tarefas executadas a que mais apresentou erros e dificuldades, com per-
centual de 72,22%, foi a de identificar os status das disciplinas através das cores,
seguindo de 50% para matricula/rematrícula e 44,44% para desmatricular disciplina e
38,89% para matricular o semestre todo.
94,44%
100%
44,44%
83,33%
1.ConsultarHistórico
2.Trocar a Senhado SIGA
3.ConsultarPlano/fazerDownload
4.ConsultarCalendário de
provas
Acertos
43
Gráfico 3 - Experiência do usuário com matrícula/rematrícula
Fonte: Elaborado pela autora (2017).
5. 3 RESULTADOS: ETAPA 3 – APLICAÇÃO DO QUESTIONÁRIO
Primeiramente foi levantado o perfil do usuário. Quanto ao gênero 55,56%
eram do sexo masculino e 44, 54% do sexo feminino.
Gráfico 4 – Questão 1: Perfil dos participantes
Fonte: Elaborado pela autora (2017).
27,78%
50%
55,56%61,11%
72,22%
50%
44,44%38,89%
Identificar statusda disciplina
Matriculardisciplina
Desmatriculardisciplina
Matricularsemestre
Acertos
Erros
55,56%
44,44%
Masculino Feminino
44
No gráfico 5 é apresentada a faixa etária dos participantes correspondente a
uma escala entre 21 a 25 anos com 38,89%, acima de 31 anos com 33,33%, o res-
tante, apresentando uma minoria entre 15 a 20 anos de 11,11% e 26 a 30 anos um
percentual de 16,67%.
Gráfico 5 – Questão 2: Faixa etária de idade dos participantes
Fonte: Elaborado pela autora (2017).
No gráfico 6 obteve-se uma maioria da modalidade do 4º(Semestre) Curso de
Logística representado por 55,56% e 5º(Semestre) de Gestão Portuária com 44,44%.
Gráfico 6 - Questão 3,4: Modalidade de Curso
Fonte: Elaborado pela autora (2017).
11,11%
38,89%
16,67%
33,33%
15 a 20 anos 21 a 25 anos 26 a 30 anos Acima de 31 anos
55,56%
44,44%
0%0%
4º Semestre Logística 5º Semestre Gestão Portuária
45
No gráfico 7 são apresentados os resultados da frequência de acesso ao
SIGA, nota-se que 72,22% acessam o sistema semanalmente, com 16,67% acessam
mensalmente e apenas 11,11% acessam diariamente.
Gráfico 7- Questão 5: Frequência de acesso ao SIGA
Fonte :Elaborado pela autora (2017).
No gráfico 8, observa-se que a maioria concorda que é fácil realizar a
matricula no SIGA 44,44%, porém com restrições, justificando que é melhor do que
presencialmente pois podem com maior facilidade acessar as informações a qualquer
nomento. Porém 22,22% dos participantes estão de acordo com o processo de
matrícula/rematrícula.
Segundo comentários dos participantes é preciso melhorar a interface
principal da matrícula e otimizar a forma de realização da matrícula.
72,22%
16,67%11,11%
0%
10%
20%
30%
40%
50%
60%
70%
80%
90%
100%
Semanalmente Mensalmente Diariamente
46
Gráfico 8 - Questão 6:É fácil realizar matrícula no SIGA
Fonte:Elaborado pela autora (2017).
No gráfico 9 observa-se que a maioria dos participantes conseguem mover se no
sistema SIGA (Muitas Vezes), representando 44,44% que afirmam que possuem faci-
lidade em executar as funcionalidades, uma minoria de (Não) 5,56% sentem
dificuldade de se mover no sistema.
Gráfico 9- Questão 7: É fácil mover no SIGA
Fonte: Elaborado pela autora (2017).
44,44%
22,22%
33,33%
0%
10%
20%
30%
40%
50%
60%
70%
80%
90%
100%
Concordo comrestrições
Concordo Discordo
5,56%11,11%
16,67%
44,44%
22,22%
0%
10%
20%
30%
40%
50%
60%
70%
80%
90%
100%
Não AlgumasVezes
Poucas Vezes Muitas Vezes Sempre
47
No gráfico 10 nota-se que 38,89% dos participantes têm facilidade em encon-
trar informações que necessitam no SIGA e uma minoria com 11,11% não consegue
encontrar informações que necessitam no SIGA.
Gráfico 10 – Questão 8: É fácil encontrar o que eu quero no SIGA
Fonte: Elaborado pela autora (2017).
No gráfico 11 destaca-se que “Algumas Vezes” com 53,33%, que os partici-
pantes argumentam que a interface do SIGA deveria ser autoexplicativa e suas
funcionalidades deveriam ser intuitivas. Possuir informações de uma maneira que fa-
çam sentido para eles.
Gráfico 11-Questão 9: O SIGA precisa de explicação introdutória
Fonte: Elaborado pela autora (2017).
11,11%
33,33%38,89%
16,67%
0%
10%
20%
30%
40%
50%
60%
70%
80%
90%
100%
Não Algumas Vezes Muitas Vezes Sempre
13,33%
53,33%
26,67%
6,67%
0%
10%
20%
30%
40%
50%
60%
70%
80%
90%
100%
Não Algumas Vezes Muitas Vezes Sempre
48
No gráfico 12 é observado que, 50% dos participantes conseguem encontrar
o que estão procurando no sistema SIGA, 22,22%(com certeza),16,67%(talvez) e por
fim 11.11%(um pouco).
Gráfico 12-Questão 10: O SIGA me ajuda a encontrar o que eu estou procurando
Fonte: Elaborado pela autora (2017).
Quanto ao site ser lento, no gráfico 13 é observado que no geral, a concor-
dância ficou representada por 44,44%(algumas vezes), 27,78%(não) e uma taxa de
discordância pequena de 5,56%(sim).
Gráfico 13- Questão 11: O SIGA é muito lento
Fonte: Elaborado pela autora (2017).
22,22%
50%
16,67%11,11%
0%
10%
20%
30%
40%
50%
60%
70%
80%
90%
100%
Com Certeza Sim Talvez Um Pouco
5,56%
44,44%
22,22%27,78%
0%
10%
20%
30%
40%
50%
60%
70%
80%
90%
100%
Sim Alguma Vezes Pouca Vezes Não
49
No gráfico 14 é apresentado os resultados relacionados a facilidade de apren-
dizagem. Nesta questão 33,33% , afirma que navegar pelo site não é um problema,
porém 27,78% tem alguma limitação (um pouco), seguido de 22,22% (talvez) e
16,67%(sim).
Gráfico 14- Questão12: Encontrar o caminho de volta no SIGA é um problema
Fonte: Elaborado pela autora (2017).
16,67%22,22%
27,78%33,33%
0%
10%
20%
30%
40%
50%
60%
70%
80%
90%
100%
Sim Talvez Um Pouco Não
50
6 CONCLUSÃO E DISCUSSÃO
A usabilidade é um requisito não funcional que não deve ser negligenciado
pois pode definir o sucesso de um software e/ou sistema. Os testes de usabilidade
devem ser planejados de tal forma que as técnicas escolhidas devem corresponder
as necessidades (funcionalidades) que se deseja avaliar.
Os testes realizados no Sistema SIGA da Faculdade de Tecnologia ”Rubens
Lara”, sob a compreensão dos alunos da instituição, apontam de fato as dificuldades
que os alunos têm em realizar a matricula/rematrícula. A interface para esta funciona-
lidade apresenta-se de forma pouco intuitiva, sem uma sequência lógica das ações a
serem realizadas, esta percepção pode ser verificada devido a posição dos elementos
distribuídos na interface. Alguns elementos como disciplinas que não podem ser se-
lecionadas (em vermelho) confunde e não encontramos razões para que estivessem
presentes durante a rematrícula posto que não estão ativas para matricular.
As tarefas realizadas diretamente no site não apresentaram muitas dificulda-
des, porém ainda sim, foram observadas algumas deficiências tais como fazer o
download, isso porque o ícone que identifica o arquivo está pouco visível.
Quanto aos resultados do questionário 72,2% semanalmente utiliza o SIGA,
possivelmente para coletar material didático. Para efetuar a rematrícula apenas
44,46% concorda com restrições que é fácil realizar a matricula. Um percentual con-
siderado baixo, o que justifica a dificuldade que tiveram ao testar a interface de forma
impressa. No que tange a eficiência, relacionada a quanto que o sistema auxilia os
usuários na realização das tarefas, apenas 16,67% afirmaram que encontram o que
desejam facilmente e 13,33% afirmam que o SIGA não precisa de explicações intro-
dutórias.
Percebeu- se também que apesar da insatisfação na realização de algumas
tarefas como a de rematrícula, ainda sim a maioria prefere realizar a matricula online.
Conclui-se que de acordo com os resultados obtidos a maior dificuldade apre-
sentada está na realização da matrícula/rematrícula com problemas de eficiência de
uso, sendo necessário uma reorganização dos elementos desta interface. A sugestão
recomendada seria usar o método de etapas, realizadas de forma sequencial, como
51
em site de comercio eletrônico, disponibilizando os elementos de acordo com as eta-
pas realizadas. Desta forma visualmente a interface ficaria menos poluída e a
realização da matricula / rematrícula mais intuitiva.
6.1 PASSOS FUTUROS
Como possíveis passos futuros, pretende-se elaborar uma interface (design)
e realizar novos testes de usabilidade, porém não apenas analisar as formas de uso,
mas também a experiência do usuário (UX).
52
REFERÊNCIAS
CYBIS,W. A.Engenharia de Usabilidade: Uma abordagem Ergonômica.2003.
DUMAS,J ,S.; REDISH,J, C., A Pratical Guide to Usability Testing. Ablex, Nor-
wood, N, J.1994.
ISO 9241.Ergonomic requirements for office work with visual display terminals,
Part 11 Usability Statements, International Standard ISO 9241-11, 1998.
LEITE, K.A. dos Avaliação de usabilidade nos sistemas computacionais serviços
de Telemedicina do Bhtelessaúde , 2007.132p. Dissertação (Mestrado em Informá-
tica) -Pontifícia Universidade Católica de Minas Gerais, Belo Horizonte,2007.
NIELSEN, J.; LORANGER, H. Usabilidade na Web. Tradução Edson Furmankiewicz
& Carlos Schafranski. Rio de janeiro: Elsevier, 2007.
NIELSEN, Jakob. Usability Engineering .Mountain View- California: Ed. Academic
Express, 1993.
NORMAN D., The design of every things./ SBN 0-385-26774-6 ,1989.
PADILHA, A.V. Usabilidade na Web: Uma Proposta de Questionário para Avaliação
do Grau de Satisfação de usuários do Comércio Eletrônico. Dissertação (Mestrado em
Ciência da Computação) -Universidade Federal de Santa Catarina, Florianópolis,
2004.
PÓVOA, M. Usabilidade de verdade: as verdades e os mitos em torno da usabi-
lidade nos projetos,2004.
PRATES, Raquel Oliveira; BARBOSA, Simone Diniz Junqueira. Avaliação de Inter-
faces de Usuário- Conceitos e Métodos. 2003.
Preece, J.; Rogers, Y.; Sharp, H.; Benyon, D.; Holland, S.& Carey, T. Human-Com-
puter Interaction. England: ADDISON-WESLEY,1994.
Preece, J.; Rogers, Y. e Sharp, H. Desing de Interação: Além da Interação Humano-
Computador. Porto Alegre: Bookman,2005.
SANTOS, R.L.G. Abordagem Heurística para Avaliação da Usabilidade de Inter-
face, Ergodesing e Interação humano-computador/Organizadora Ana maria de
Morais, Rio de Janeiro,RJ,2002.
SHNEIDERMAN, B. Designing the User Interface. Addison-Wesley, Reading, MA.
1988.
53
SIGA FATEC RUBENS LARA.Disponível em:<https://siga.cps.sp.gov.br/aluno/login.>
Acesso em: 10 de Novembro de 2017.
WAMMI. Disponível em:<http://www.wammi.com/> Acesso em 05 de Setembro
2017.
WINCKLER, M. Avaliação de Usabilidade de sites Web. In: IV Workshop sobre Fa-
tores Humanos em Sistemas de Computação. Florianopolis, Out.2001.
54
ANEXO A – QUESTIONÁRIO WAMMI (WEB LOCAL ANALYSIS AND
INVENTORY OF MEASURE)
1.Sexo:
( ) Masculino ( )Feminino
2. A minha idade está entre:
( ) 15 a 20 anos ( )21 a 25 anos ( )26 a 30 anos ( )Acima de 31 anos
3. Curso matriculado:
( ) Gestão Empresarial ( ) Gestão Portuária ( ) Logística
4. Semestre:
( ) 3° semestre ( ) 4° semestre ( ) 5° semestre ( ) 6° semestre
5. Frequência de acesso no SIGA.
( ) diariamente ( ) semanalmente ( ) mensalmente
6. É fácil realizar a matricula no SIGA.
( ) nunca fiz essa atividade ( ) concordo com as restrições ( ) discordo
7. É fácil se mover no SIGA.
( ) não ( ) poucas vezes ( ) algumas vezes ( ) muitas vezes ( ) sempre
8. Eu posso encontrar facilmente o que quero no SIGA.
( ) não ( ) algumas vezes ( ) muitas vezes ( ) sempre
9. O SIGA precisa de mais explicação introdutória.
( ) não ( ) algumas vezes ( ) muitas vezes ( ) sempre
10. O SIGA me ajuda a encontrar o que eu estou procurando.
( ) com certeza ( ) sim ( ) talvez ( ) um pouco ( ) não
55
11. O SIGA é muito lento.
( ) sim ( ) algumas vezes ( ) poucas vezes ( ) não
12. Aprender a encontrar meu caminho de volta no SIGA é um problema.
( ) com certeza ( ) sim ( ) talvez ( ) um pouco ( ) não
13. Coloque suas observações sobre as dificuldades que você tem ao utiliza o SIGA.
14. Coloque aqui suas sugestões para o SIGA, que possam ajudá-lo a uma melhor
experiência com a aplicação.