Universidade Federal do Acre

Centro de Cincias Exatas e Tecnolgicas

Bacharelado em Sistemas de Informao

Avaliao
Testes com usurios

Macilon Arajo Costa Neto

macilon@ufac.br

Captulo 14 de Design da Interao de Preece et al. (2005)

Na aula anterior...
Modelos preditivos
O modelo GOMS
O modelo KLM
Benefcios e limitaes
Como foi anlise da tarefa?
Hiptese confirmada? Ou no? Por qu?
Fizerem na mo? Usaram planilhas?

CCET214 Interface Homem-Mquina 2

Agenda
Testes com usurios
Introduo
Determinar as metas e explorar as questes
Escolher o paradigma e as tcnicas
Identificar as questes prticas
Decidir com lidar com questes ticas
Avaliar, analisar e interpretar os dados

CCET214 Interface Homem-Mquina 3

Introduo
Constituem um aspecto fundamental do design
Forma aplicada de experimentao
avaliar se o produto usvel
pelos pretensos usurios
realizando algumas tarefas
Tipicamente so medidos
tempo para completar uma tarefa
nmero e tipos de erros cometidos
caminhos percorridos
Tcnicas complementares
observao, questionrios, entrevistas e logs
CCET214 Interface Homem-Mquina 4
 Determinar as metas e explorar
as questes
Mais adequado para testar prottipos e funcionalidades
Metas muito amplas como determinar quo usvel o sistema
Questes especficas devem ser usadas para focar o estudo
Os usurios podem completar uma tarefa dentro de um
determinado tempo?
Os usurios podem encontrar um determinado item dentro do
sistema?
Os usurios podem dar uma resposta para uma determinada
questo?

CCET214 Interface Homem-Mquina 5

Escolher o paradigma e as
tcnicas
Testes com usurios inserem-se no
paradigma de Teste de Usabilidade
Isso envolve algumas tcnicas
Registrar dados utilizando uma combinao de
vdeo, udio, anotaes e logs da interao
Questionrios de satisfao do usurio
Entrevistas com os usurios

CCET214 Interface Homem-Mquina 6

Identificar as questes
prticas
Projetar tarefas tpicas
Selecionar usurios tpicos
Preparar as condies para o teste
Planejar como executar os testes

CCET214 Interface Homem-Mquina 7

 Projetar tarefas tpicas
Esse um ponto crtico da avaliao
Tarefas a serem completadas usando o sistema
encontrar um site, documento, etc.
elaborar um documento, planilha, etc.
cadastrar um cliente, produto, transao, etc.
Devem durar entre 5 e 20 minutos
So projetadas para investigar um problema
Produzem medidas quantitativas de desempenho
Dependem do tipo de prottipo disponvel

CCET214 Interface Homem-Mquina 8

 Selecionar usurios tpicos
Conhecer as caractersticas dos usurios
Alguns produtos so destinados a usurios especficos
crianas, pessoas com alguma experincia

aconselhvel equilbrio de gnero

Verificar pessoas com experincia em sistemas
semelhantes
Considerar os diferentes nveis de experincia
Procure sempre obter uma amostra representativa
essencial para generalizar os resultados

CCET214 Interface Homem-Mquina 9

 Preparar as condies para o
teste
O ambiente deve ser controlado
evitar influncia sobre os resultados
Deve ser organizado de maneira a imitar o mundo real
Isolamento acstico, do meio exterior, de pessoas, etc.
H disponvel um laboratrio de usabilidade?
Laboratrio principal

Sala de observao

Demais estrutura para conforto do participante

CCET214 Interface Homem-Mquina 10

 http://www.linhadecodigo.com.br
CCET214 Interface Homem-Mquina 11
 http://www.tibahia.com

CCET214 Interface Homem-Mquina 12

 http://www.conectt.com.br
CCET214 Interface Homem-Mquina 13
 Planejar como executar os
testes
Um cronograma e roteiros para execuo das tarefas
Os equipamentos devem ser configurados
A realizao de, no mnimo, um teste piloto
desejvel que se inicie com uma tarefa de familiarizao
Iniciar com a tarefa menos complexa e evoluir gradativamente
Tenha um plano de contingncia para situaes excepcionais
Procure fazer com que no dure mais de uma hora
nove participantes nove horas de vdeo para revisar e analisar
pr-teste, testes, ps-teste, entrevista exausto
Tenha um plano de contingncia para situaes excepcionais

CCET214 Interface Homem-Mquina 14

Decidir com lidar com questes
ticas
Conhecer o que h de regulamentao sobre
Preparar e planejar a carta de consentimento
Deixar claro que o usurio est sendo
observado
espelhos, cmeras, logs, etc.

CCET214 Interface Homem-Mquina 15

Avaliar, analisar e interpretar
os dados
Revisar e analisar os vdeos e logs
extrair as medidas de desempenho
Com um nmero pequeno de participantes
usar estatstica descritiva
mnimos, mximos, mdias e desvios-padro
permitem comparar prottipos e tarefas
Lanar mo de ferramentas que suportem a
anlise, especialmente de vdeo

CCET214 Interface Homem-Mquina 16

Atividade complementar
Planeje um teste de usabilidade para trs
tarefas permitidas no sistema que sua equipe
est desenvolvendo
Siga o modelo apresentado no prximo slide
Utilize um plano fornecido pelo professor
Consultando, tambm, o relato da seo 14.2.1
Sim, uma das tarefas pode ser login :P
Procure evitar estas desculpas:
- https://brasil.uxdesign.cc/as10desculpasmais
comunsparan%C3%A3ofazertestescomusu%C3%A1rios
2ad35afb9b27

CCET214 Interface Homem-Mquina 17

 Plano de testes com usurios
1)Determinar as metas e explorar as questes
2)Escolher o paradigma e as tcnicas
3)Identificar as questes prticas
Projetar tarefas tpicas
Selecionar usurios tpicos
Preparar as condies para o teste
Planejar como executar os testes
4)Decidir com lidar com questes ticas
5)Avaliar, analisar e interpretar os dados

CCET214 Interface Homem-Mquina 18

Continua...
Avaliao Heurstica

CCET214 Interface Homem-Mquina 19