Testes de Usabilidade

1. Testes de Usabilidade “Não é o que considera sobre o seu sítio que conta, mas sim o que os utilizadores pensam dele.” — Jakob Nielsen (adaptado)

2. O que são? • São testes que avaliam o desempenho de um produto quando utilizado pelos utilizadores ao qual este se destina. • São testes laboratoriais realizados em condições controladas similares àquelas nas quais o produto se irá utilizar. • Testam a primeira utilização de uma nova funcionalidade do produto.

3. Para que servem? • Permitem obter uma avaliação quantitiva do desempenho do sistema. Conhecer: • O tempo de execução médio de cada tarefa. • A percentagem de utilizadores que completaram, com sucesso, cada tarefa. • O número de vezes que o utilizador recorreu à documentação para cada tarefa. • O número e tipo (observações e comentários, não-críticos e críticos) de erros. (...)

4. Para que servem? • Permitem obter uma avaliação qualitativa do sistema – opinião dos utilizadores sobre: • Informação dos ecrãs. • Terminologia e informação do sistema. • Aprendizagem. • Capacidades do sistema.

5. Quando se fazem?[Rubin, 1994] • Na fase inicial de projecto: para estabelecer a intuitividade da implementação – teste exploratório. • Na fase inicial e durante a fase de desenvolvimento: para medir a efectividade da implementação – teste de avaliação. • Na fase próxima do lançamento: para verificar que o produto corresponde ou excede as expectativas e como é que o produto se comporta como um todo – teste de validação. • A qualquer instante: para comparar o desempenho do sistema antes e depois de determinada alteração – teste comparativo.

6. Como proceder? • Definir o público-alvo e os seus objectivos. • Quem vai utilizar o produto e o que pretende do mesmo? • Definir tarefas com base nesses objectivos. • As tarefas são cenários típicos de utilização do produto pelo público-alvo. • Encontrar as pessoas adequadas. • Devem corresponder ao perfil do público-alvo ou aproximar-se o mais possível. • Observá-las a executar as tarefas. • Tentar compreender o modelo mental dos utilizadores para que o produto os satisfaça. Deve-se pedir ao utilizador que vá dizendo o que pensa à medida que utiliza o produto.

7. Um caso prático • Avaliar a usabilidade de um sistema de Banca na Internet. Realizar um pré-teste para melhorar o teste real. • Será que as pessoas com mais receptividade para a tecnologia têm mais facilidade em utilizar a Banca na Internet? • Quais são os melhoramentos a introduzir na Banca na Internet para que esta possa ser utilizada por pessoas com menos aptidão tecnológica?

8. Público-alvo e objectivos • Constituído por alunos universitários que tenham ingressado este ano no ensino superior. • Devem fazer algum uso da Internet. • Não devem conhecer a Banca na Internet do banco em questão. • Os utilizadores pretendem consultar informações sobre o banco e produtos disponibilizados.

9. Tarefas • Obtenção de informações sobre empréstimo para suportar os custos da educação. • Saber qual a taxa de câmbio para uma moeda estrangeira. • Determinar as condições para a aquisição de habitação própria.

10. Selecção de utilizadores (1ª fase) • Encontrar um grupo numeroso de pessoas que se encaixem no perfil demográfico. Neste caso são alunos universitários que ingressaram este ano no ensino superior. • Distribuir um questionário a estes utilizadores para determinar: • Receptividade a novas tecnologias. • Uso de uma escala já testada (Technology Readiness Index—TRI, [Parasuraman, 2000]) que avalia 4 dimensões: Optimismo, Capacidade de inovação, Desconforto e Insegurança. • Utilização de novas tecnologias (Internet e Banca na Internet). • Informações demográficas detalhadas.

11. Selecção de utilizadores (2ª fase) • Ordenar os utilizadores pelo seu índice de receptividade a novas tecnologias (TRI). • Eliminar outlyers. • Definir três grupos de alguns candidatos com índices baixos, médios e altos. • De cada grupo escolher dois utilizadores (um participante e outro suplente) cujo índice reflicta a utilização que faz das novas tecnologias. • Para o pré-teste escolher dois utilizadores (um participante e um suplente) do grupo com índices médios.

12. TRI dos candidatos

13. Reunião com os utilizadores • Depois de escolhidos convocam-se telefonicamente os utilizadores para uma reunião onde se irá explicar: • Os documentos que irão assinar no dia do teste. • Que as acções que executam sobre o produto irão ser registadas e observadas por um painel de observadores. • Quais as regras de funcionamento do teste. • Deve também informar os utilizadores da data e hora de realização do teste.

14. O teste (para o utilizador) • Autorização de participação • Acordo de confidencialidade (preenchido por todos os intervenientes no teste) • Execução das tarefas • Entrevista final (foca pontos dúbios da utilização que fez do produto) • Questionário para avaliação de satisfação ([Chin et al, 1988]) onde o utilizador pode descrever até três aspectos negativos e três positivos.

15. Cenário físico

16. O teste (para o monitor) • O monitor permanece com o utilizador numa sala e observa o seu comportamento. Deve pedir ao utilizador para verbalizar os seus pensamentos sobre o produto. • Deve dialogar com o utilizador sem lhe colocar perguntas fechadas (“Considera (in)seguro?” vs “O que pensa da segurança?”). • Não deve mostrar muito conhecimento sobre o produto.

17. O teste (para o observador) • O observador permanece noutra sala que deve estar isolada visual e acusticamente da sala onde decorre o teste. • O observador regista os dados objectivos da utilização, permitindo assim que o monitor se concentre no diálogo com o utilizador. • Vários observadores e um monitor.

18. Resultados • Análise demográfica dos participantes • Análise da execução das tarefas • Análise dos questionários de avaliação de satisfação • Comentários relevantes dos utilizadores durante o teste • Recomendações baseadas nos pontos anteriores