Relatório de Testes de Usabilidade

1 - Introdução

2 - Execução dos Roteiros de Teste

Grupo: LUDERS
Quantidade de Testadores: 3
Usuário 1 - Eliana Yuri
Usuário 2 - Renato Bressan
Usuário 3 - Vinicius Paschoal

1ª Bateria de Testes – Usuário 1
Ciclo 1 - Localizar um Endereço

Ciclo 2 – Traçar uma rota com endereço de Origem e de Destino

Ciclo 3 – Localizar a informação de um itinerário

Fatores analisados
Dificuldade para o cumprimento da tarefa: nào apresentou dificuldades
Interpretação das tarefas: conseguiu interpretar as tarefas conforme foram descritas
Comportamento durante a execução dos testes: -
Stress gerado durante a execução das tarefas: -
Fatores externos ao sistema: -
Tempo utilizado: 5 minutos (em protótipo de papel)
Tentativas: 1
Percentual de Erros: 0%

Respostas dos questionários:
a - Simples
b - Média
c - Muito Simples
d - Simples
e - Fácil identificação dos elementos da tela
f - "Sim. No meu entendimento, as funcionalidades principais foram atendidas com este protótipo. Porém, acho que poderia existir mais filtros para facilitar a busca das informações, como por exemplo na tela "Traçar Rota", poderia haver um passo onde se escolhe qual o tipo de trajeto, como carro, ônibus ou a pé, por exemplo."

Análise dos resultados do usuário 1: pode-se verificar que, pelos testes realizados por este usuário, as atividades foram realizadas de forma simples e objetiva, com um período de tempo ideal.

2ª Bateria de Testes – Usuário 2
Ciclo 1 - Localizar um Endereço


Ciclo 2 – Traçar uma rota com endereço de Origem e de Destino


Ciclo 3 – Localizar a informação de um itinerário



Fatores analisados
Dificuldade para o cumprimento da tarefa: não apresentou nenhuma dificuldade
Interpretação das tarefas: tarefas interpretadas conforme descritas
Comportamento durante a execução dos testes: -
Stress gerado durante a execução das tarefas: -
Fatores externos ao sistema: -
Tempo utilizado: 4,30 minutos
Tentativas: 1
Percentual de Erros: 0%

Respostas dos questionários:
a - Simples
b - Simples
c - Simples
d - Simples
e - Requer um certo grau de conhecimento do sistema
f - "Sim."

Análise dos resultados do usuário 2: assim como o primeiro usuário, este conseguiu ter um bom aproveitamento nas tarefas solicitadas. O nível de detalhamento das tarefas pode ter ajudado a manter este desempenho.

3ª Bateria de Testes – Usuário 3

Ciclo 1 - Localizar um Endereço


Ciclo 2 – Traçar uma rota com endereço de Origem e de Destino

Ciclo 3 – Localizar a informação de um itinerário



Fatores analisados
Dificuldade para o cumprimento da tarefa: nenhuma dificuldade foi apresentada
Interpretação das tarefas: interpretadas conforme descritas
Comportamento durante a execução dos testes: -
Stress gerado durante a execução das tarefas: -
Fatores externos ao sistema: -
Tempo utilizado: 5 minutos
Tentativas: 1
Percentual de Erros: 0%

Respostas dos questionários:
a - Muito Simples
b - Média
c - Muito Simples
d - Muito Simples
e - Fácil identificação dos elementos da tela
f - "Sim. As funções são atendidas conforme o que elas propõem. Só tenho um comentário sobre a maneira como as telas foram desenhadas/elaboradas. Dependendo do grau de conhecimento do usuário, a utilização do sistema pode tornar-se cansativa".

Análise dos resultados do usuário 3: seguindo o mesmo conceito dos outros 2 usuários anteriores, este conseguiu um bom desempenho na utilização do sistema. As opiniões sobre a interface/navegação pelo sistema serão analisadas, visando sempre manter a qualidade do produto.

3 - Análises e Comentários Finais

O protótipo apresentou-se suficiente para o atendimento das tarefas as quais se propõe. Outras atividades do sistema porventura deverão também ser testadas com outros usuários, visando testar o seu grau de facilidade e intuitividade com estes (e, consequentemente, com todo o restante) usuários. As opiniões dos testadores serão avaliadas e poderão ser revisados os protótipos.

Glossário

Ambiente Computacional - Ambiente onde serão realizados os testes para o desenvilvimento do quiosque.
Cancelar Operação - Cancelar operação corrente.
Consultar Rodízio de Veículos - Selecionar a opção Rodízio de Veículos do quiosque.
Consultar situação do trânsito em rota - Informa situação do trânsito em rota no mapa.
Dados de entrada - Dados que o usuário irá incluir para a utilização do quiosque, como por exemplo o enedereço de destino ou o ponto turístico desejado.
Impressão - Imprime mapa em papel.
Interface - Modo visual de contato entre o usuário e o sistema.
Localizar endereço - Localiza endereço informado pelo usuário.
Localizar itinerário - Localiza itinerários disponíveis.
Localizar ponto - Localiza ponto turístico, utilidade pública ou comercial.
Metodologia - Método de trabalho utilizado para o desenvolvimento do quiosque.
Moradores - População da cidade onde o quiosque está instalado.
Protótipo - Modelo onde se pode fazer simulações das características do sistema.
Resultado esperado - Informações esperadas após a inclusão de dados para a procura.
Turistas - Pessoas que fazem visitas à cidade onde o quiosque está instalado.
Usabilidade - Facilidade na utilização do quiosque. O usuário deverá satisfazer com as aplicações do sistema.
Usuários - Pessoas que utilizam o quiosque.

Cenários de Interação

Extra

Projeto Concreto de Interação

Projeto Abstrato de Interação

Plano de Teste de Usabilidade

1 - Introdução
Com o grande avanço das cidades, a construção de novos empreendimentos é inevitável. Com isso, áreas onde antigamente tínhamos apenas terra e mato, temos agora grandes prédios, e grandes avenidas para o seu acesso. Tornando sempre muito difícil o conhecimento das principais vias da cidade, bem como o transporte público para chegar a tal localidade. Além disso, muito comumente o trânsito no centro da cidade tem seu fluxo alterado, inclusive durante um mesmo dia (faixas reversas utilizadas nos horários de pico). Com o intuito de sanar este problema, o Governo da cidade tem um grande interesse em adquirir o Quiosque 2more, facilitando a localização da população dentro de sua própria cidade, ajudando o trânsito e o orçamento da cidade.

2 - Objetivos
Coletar para posterior estudo as informações de interação dos usuário com o sistema Quiosque 2more. Com esse teste, é possível verificar o quão intuitivo e simples é o uso do sistema para os usuários que, neste cenário, serão dos mais diferentes níveis, partindo dos usuários que nunca tiveram contato com algo parecido, até os mais experientes no ramo da informática. Além disso, serve como base para verificação da utilização do sistema por usuários mais avançados, evitando que tarefas "bobas" sejam realizadas, evitando o cansaço na utilização do sistema por um certo tempo. Atingindo, com isso, um padrão de eficiência e facilidade no uso do sistema.

3 - Usuários
Serão utilizados usuários de todas as idades, e que foram divididos da seguinte forma:

• Moradores s/ Automóvel: utilizaram o sistema para retirarem informações sobre o transporte coletivo público. Serão a grande maioria dos usuários do sistema. Por motivos financeiros, geralmente são os usuários qe apresentarão maior dificuldade na operação do sistema, devido a não inclusão digital.
• Moradores c/ Automóvel: utilizaram o sistema para coletarem informações sobre rotas e sobre o trânsito na cidade. Podem ser grandes utilizadores do sistema, principalmente da área sobre informação do trânsito.
• Turistas em geral: geralmente não conhecem absolutamente nada sobre o transporte da cidade, e serão os mais auxiliados pelo sistema.

4 - Método de Trabalho
A metodologia empregada sera simplista. Os testes ocorrerão em uma sala que simula um ambiente real para poder facilitar a captação das reações dos usuários/voluntário perante o uso do sistema. O usuário será recebido por um "orientador" ao qual dará um overview geral do Quiosque, sem detalhar o uso do sistema para não prejudicar os passos dos testes. Será entregue para o usuário uma lista com as tarefas a serem executadas, onde será contabilizado o tempo para cada tarefa exercida com o objetivo de comparar com o tempo estimado satisfatório.

5 - Lista de Tarefas
Abaixo segue a lista das tarefas com os tempos estimados:

Localizar um endereço

Traçar uma rota com endereço origem e destino

Localizar a informação de um itinerário

6 - Métodos de Avaliação
Serão coletados dados sobre:

• Nível de dificuldade para o cumprimento de uma tarefa;
• Interpretação de cada tarefa;
• Comportamento durante a execução dos testes;
• Nível de stress gerado pela execução das tarefas;
• Fatores externos ao sistemas (como barulhos);
• Tempo utilizado nas tarefas;
• Número de erros/acertos;
• Tentativas
  

7 - Ambiente de Teste
Os testes serão executados em uma sala, com cerca de 10 usuários por vez. A sala será observada pelos Observadores, que estarão colhendo informações importantes para o resultado final dos testes de usabilidade. O ambiente computacional para o usuário será exatamente o mesmo utilizado no Quiosque, tirando apenas o Quiosque, fazendo com que o resultado final seja o mais próximo da realidade. Primeiramente, serão executados os testes em ambiente silencioso, e depois, com um ambiente barulhento, simulando ainda mais a realidade.

8 - Papéis da Equipe de Teste
Monitor - dará uma explicação básica e tirará dúvidas sobre o script de testes, porém sem entrar na operação do sistema. Deverá conhecer o escopo do sistema. Servirá também como um "guarda" durante os testes, evitando que os testadores se cominuquem entre si.
Observador - observador de todo o processo de testes em que os testadores estarão sendo avaliados. Estarão presentes no momento do teste e no pós-teste, fazendo a análise dos dados coletados. Não necessitam ter conhecimento sobre o sistema, já que estarão fazendo avaliações comportamentais dos usuários.

9 - Questionário
a - Como você considera a tarefa 1, Localização de Endereço?:
( ) Muito Simples
( ) Simples
( ) Média
( ) Complexa
( ) Muito Complexa

b - Como você considera a tarefa 2, Traçar Rota?:
( ) Muito Simples
( ) Simples
( ) Média
( ) Complexa
( ) Muito Complexa

c - Como você considera a tarefa 3, Localizar Itinerário?:
( ) Muito Simples
( ) Simples
( ) Média
( ) Complexa
( ) Muito Complexa

d - O que você achou da Navegação do Sistema?:
( ) Muito Simples
( ) Simples
( ) Média
( ) Complexa
( ) Muito Complexa

e - Sobre a Interface/Identidade Visual do sistema:
( ) Fácil identificação dos elementos da tela
( ) Intuitiva
( ) Requer um certo grau de conhecimento do sistema
( ) Não possui padrão e difícil entendimento
( ) Muito Complexa

f - Comente: As etapas executadas no protótipo atendem as funções correspondentes? Explique:

10 - Relatório de Análise
O resultado final será inserido em um relatório de análise das informações colhidas antes, durante e depois dos testes.

Lista de Requisitos e Metas de Usabilidade

Requisito: Busca de Endereço
Cenário: Joaquim necessita realizar uma visita a um cliente novo da empresa de engenharia em que trabalho. O cliente informou à Joaquim que encontra-se na Av. Engenheiro Luis Carlos Berrini, n 1209, no Brooklin. Joaquim consegue facilmente chegar até a avenida, porém ficaria mais fácil saber o local exato. Joaquim utiliza o Quiosque 2more para tirar sua dúvida.
Estilo de descrição: Assim como Joaquim, cerca de 90% dos usuários devem conseguir encontrar o endereço na primeira tentativa em até 1 minuto, tornando o sistema agradável de ser utilizado. Além disso, 95% dos usuários devem achar a interface visual muito agradável.

Requisito: Traçar Rota
Cenário: Jorge pegou um novo itinerário para ser cumprido no dia. Jorge não conhece parte do trajeto, porém, como de costume, para evitar transtornos aos outros motoristas no trânsito, Jorge resolve utilizar o Quiosque 2more para validar o seu trajeto.
Estilo de descrição: Inicialmente, dois protótipos serão construídos em tempo de projeto para que esta etapa seja muito bem validada. Na liberação do primeiro protótipo, testes com alguns usuários serão feitos e as falhas deverão ser corrigidas na segunda versão. Possíveis ajustes deverão ser feitos na última versão desde que acordadas com o contratante (mudança de escopo/prazo).

Requisito: Localizar Itinerário
Cenário: Amélia acabou de chegar em São Paulo a passeio, e deseja ir da rodoviária, que fica próxima a altura do no 1200 da Av. Engenheiro Luis Carlos Berrini, no Brooklin, até a Avenida Faria Lima, aproximadamente no número 3700. Amélia já sabe onde fica o ponto de ônibus e as diversas opções para chegar a esta rua, porém não sabe qual a melhor alternativa. Amélia dirige-se ao Quiosque 2more para identificar tais informações.
Estilo de descrição: 75% dos usuários deverá informar o endereço de origem e destino na primeira utilização. 20% irão utilizar a ajuda do sistema para realizar a tarefa com sucesso. 50% dos usuários deverão realizar esta tarefa em menos de 2 minutos.

Requisito: Localizar Ponto
Cenário: Sábado é aniversário de Joaquim. Como de costume, na sexta-feira, Joaquim quer sair com seus amigos do trabalho para comemorar. Porém, Joaquim não quer ir para os lugares que freqüenta sempre. Joaquim gostaria de encontrar um bar novo que possa desfrutar dessa data com seus amigos.
Estilo de descrição: 50% dos usuários freqüentes do sistema deverão executar esta tarefa. 90% desses usuários encontrarão a informação desejada na primeira tentativa. 30% dos usuários levarão cerca de 4 minutos para chegar ao resultado final.