Friday, May 04, 2007

Up.pt vs Usabilidade - Teste com Utilizadores

Foram criadas 3 tarefas e analisados 3 utilizadores diferentes (todos eles multimédicos).

Tarefas:

1. Informação sobre o gabinete UPIN – Universidade do Porto inovação
2. Data das provas de Doutoramento Mestre Patricia Antunes
3. Numero de telefone SOS da U.Porto


Tarefa 1 Informação sobre o gabinete UPIN
Apenas 2 passos: Inicio > I&D(1) > UPIN(2)

Utilizador 1
Passo1: 3cliques até acertar.
Passo2: apenas 1 clique
Tempo: 35 seg
Obs: A principio um bocado perdido pelo interface, estudou muito todos os menus antes de clicar...cobaia já sabia que estava a ser avaliada! No entanto completou a tarefa num tempo relativamente satisfatório.

Utilizador 2
Passo1: apenas 1 clique
Passo2: 2 ciques até acertar
Tempo: 1 min 03 seg
Obs: Totalmente perdido. Estudou todas as opções que tinha antes de avançar. Outro que sabia que estava a ser avaliado.

Utilizador 3
Passo1: 5 cliques, ou seja 1 erro + 1 clique até acertar
Passo2: apenas 1 clique
Tempo: 1min e 58 seg
Obs: Visualizou todas as possibilidades antes de avançar e mesmo assim ainda deu um erro.

Tarefa 2 Data das provas de Doutoramento Mestre Patricia Antunes
Caminho mais rápido e lógico: Inicio > Comunicação (1) > Noticias (2) > Provas Académicas (3) > Mestre Patricia Antunes (4)

Utilizador 1
Passo1: 2 erros (10cliques) + 1
Passo2: 1 erros (5 cliques) Desistiu
Tempo: 2 min 38 seg até à desistência
Obs: Navegação totalmente aleatória sem qualquer noção da direcção correcta.

Utilizador2
Passo1: 3 cliques e desistiu
Tempo: 1min 38 seg
Obs: O utilizador mexeu com o rato pelo ecran todo, suspirou e disse “isto não está nada perceptivel!”

Utilizador3
Passo1: erro mais 1 clique
Passo2: 1 clique
Passo3: 1 clique
Passo4: 1 clique
Passo5: 1 clique
Tempo: 3 min e 10 seg
Obs: O utilizador descobriu um caminho diferente que aquele estabelecido. Foi então por um caminho mais complicado e teve também dificuldades em ler, em alguns passos o texto aparece muito condensado e com uma hierarquização pouco perceptivel, dificultou a tarefa ao utilizador o que causou mais demora.

Tarefa 3 Número de telefone SOS da U.Porto
Caminho mais rápido: Inicio > Pessoal (1) > Linha SOS (2)

Utilizador1
Passo1: 3 erros (15 cliques) 1 clique
Passo2: 1 clique
Tempo: 5 min
Obs: Tirando os erros, o utilizador deu 2 cliques até chegar ao destino mas demorou demasiado tempo percorrendo quase todo o site. O utilizador perdeu-se muitas vezes e recorreu ao mapa do site mas sem sucesso.

Utilizador2
Passo1: 1 erro e 1 clique
Passo2: 1 clique
Passo3: 1 clique
Passo4: 1 clique
Tempo: 3 min e 10 seg
Obs: O utilizador chegou ao destino por um caminho diferente. Apresentou dificuldades em ler a informação.

Utilizador3
Passo1: 3 cliques
Passo2: 1 clique
Tempo: 56 seg
Obs: Observou sempre atentamente a primeira página.

Conclusões:

Os utilizadores testados por norma perderam-se bastante não achando o website perceptivel ou intuitivo. Mesmo as tarefas mais faceis com menos passos tiveram tempos demasiado extensos. Também a dificil percepção de menus secundários e dificuldades de leitura não contribuiem para o bom funcionamento do sistema.
Com estes testes pode-se afirmar que a organização da informação não é a mais correcta. Os utilizadores têm dificuldade em chegar ao seu destino e não sabem por onde começar a procurar. Note-se que os utilizadores testados, ao serem jovens estudantes do curso deJornalismo e Ciências da Comunicação – vertente de Comunicação Multimédia, estão familiarizados com a internet e com o sistema sigarra, mesmo assim tiveram dificuldades em completar as tarefas pedidas chegando mesmo a haver desistências. A usabilidade deste sistema deve ser repensada a fim de conseguir responder às expectativas de todos os seus utilizadores, estejam eles familiarizados com o sistema ou não.

Thursday, May 03, 2007

Up.pt vs Usabilidade

O sistema SIGARRA nasceu em 1992 na faculdade de Engenharia da Universidade do Porto. Com o desenvolvimento do sistema, a Universidade do Porto decidiu adoptar o SIGARRA como elemento de consistência na web entre as faculdades. No entanto as excepções existem, nomeadamente a Faculdades de Ciências e Belas Artes com interfaces diferentes (esta ultima possui SIGARRA mas adoptou uma imagem inicial diferente).
Criando a ponte para o meu trabalho de projecto para a disciplina de EAM, que se vai centralizar numa nova imagem para a U.Porto com acessibilidade e usabilidade garantida, inicio o meu estudo de usabilidade com uma avaliação heuristica (metodo empirico) e testes com uilizadores (metodos não-empiricos).

Relembrando então as 10 heuristicas de Jacob Nielson:

• Visibilidade do estado do sistema
• Ajuste entre o sistema e o mundo real
• Controlo e liberdade do utilizador
• Consistência e standards
• Ajuda aos utilizadores para reconhecerem, diagnosticarem e recuperarem de erros
• Prevenção de erros
• Reconhecimento em vez de lembrança
• Flexibilidade e eficiência no uso
• Estética e design minimalistas
• Ajuda e documentação


1. Visibilidade do estado do sistema

Conformance Question
O que deve o sistema fazer para satisfazer o principio?
Os utilizadores são informados do estado do sistema com o feedback apropriado num espaço de tempo razoável?
Que meios estão disponiveis para informar, orientar e conduzir o utilizador durante a interacção?

Evidence of Conformance
Existe um problema de visibilidade no up.pt. a hierarquização da informação não foi feita devidamente o que baralha bastante um utilizador que não esteja familiarizado com o sistema. A interacção disponivel, na primeira página, são 3 pequenos banners com algum evento próximo com ou sem movimento e nos menus ou links (on mouseover) com uma tenue mudança nos já tons pastel do website.
De realçar a pequena barra de localização, que indica sempre ao utilizador que caminho percorreu e onde se situa. Isto ajuda bastante os usuários um vez que como se trata de um sistma complexo e com bastante informação é provavél que se desoriente. No entanto a barra está pouco visivel.

Motivation
Ao satisfazer esta heuristica, é possivel orientar o utilizador pelo website. A interacção devidamente utilizada ajuda a estabelecer laços com os utilizadores, um factor que considero muito importante, visto que se trata de um website de uma universidade.

2. Ajuste entre o sistema e o mundo real

Conformance question
O sistema utiliza conceitos e linguagens familiares para o utilizador em vez de linguagens mais tecnicas?
Usa convenções da vida real e dispõe a informação numa ordem lógica e natural?


Evidence of Conformance
A linguagem usada é na sua maioria acessivel a todos. No entanto, destaco o uso da sigla “I&D” investigação e desenvolvimento, constantemente ao longo do website. Ora isto obriga a que todo o utilizador saiba o que “I&D” signifique, e não será o caso. Alerto também para o facto de algumas noticias, mesmo sendo para uma comunidade mais especifica e cientifica da U.Porto, estarem disponiveis só em inglês. Todo o conteudo deveria estar disponivel pelo menos em 2 idiomas.
Existe um exemplo claro de um correcto uso duma convenção da vida real que é o grande sinal de proibido, utilizado no sinais de transito, usado quando existe algum erro por parte do utilizador.
Quanto à organização da informação, esta não segue sempre uma ordem lógica e natural. Ao navegarmos pelo sistema, é frequente aparecerem opções novas no lado direito e pode confundir o utilizador com tantas opções.

Motivation

Esta heuristica facilita a navegação e a compreensão do sistema. As convenções com o mundo real podem tornar-se extremamente eficazes.

3. Controlo e liberdade do utilizador

Conformance Question
Os utilizadores conseguem fazer o que querem quando querem?
Que controlo tem o utilizador sobre as suas acções?

Evidence of conformance
O utilizador tem liberdade para ir onde quiser em todo o sistema.Pode fazer download de uma serie de ficheiros, pesquisar pessoal, etc. É possivel voltar atrás ou ao menu inicial através da barra de localização.
Com autenticação no up.pt, o utilizador acede a um nivel diferente de navegação, com mais opções, menus, conteudos, etc. No entanto mesmo dentro da autentificação existem diferenças entre alunos e docentes por exemplo.

Motivation
O utilizador deve ter controlo sobre as suas acções. Mantendo-se sempre capaz de se dirigir ao inicio ou sair do sistema quando desejar.

4. Consistência e Standards

Conformance Question
Existe homogeneidade e coerência nos diferentes elementos do interface?

Evidence of Conformance
O interface do sistema apresenta consistência entre os elementos.No entanto, a quantidade excessiva de links externos para outras pagina SIGARRA não é agradável para o utilizador.

Motivation
A consistência permite que uma comunidade mais vasta consiga navegar no sistema, não precisam depender da experiência que teêm com outros sistemas para perceber outro. A ISO têm um papel fundamental a nivel mundial no que diz respeito a standards. Apresenta as melhores soluções para uniformizar produtos, sistemas, etc.

5. Prevenção de erros

Confomance Question
Que mecanismos existem para evitar ou reduzir a ocorrência de erros?

Evidence of Conformance
O up.up fornece ao utilizador uma quantidade de caminhos e possibilidades enorme de chegar a uma determinada informação que por si só já faz com que o utilizador se perca. Os erros também não são prevenidos uma vez que o utilizador não sabe bem onde se dirigir para encontrar a sua informação – penso que a falta de um motor de busca geral seria uma solução.

Motivation
Os erros são a maior falha que um sistema pode ter e a maior causa de frustração para utilizadores da internet. Ao evitar e minimizar erros está-se a contribuir para as expectativas dos utilizadores.

6. Reconhecimento em vez de lembrança

Conformance Question
Estão as opções, elementos e acções bem visiveis ao utilizador?
São reconhecidos em vez de recorrer à memória do utilizador?

Evidence of conformance
Infelizmente o utilizador para chegar a uma determinada informação tem de recorrer às suas lembranças. O facto de as opções aparecerem do lado esquerdo, direito, em cima e mesmo assim não estarem bem assinaladas faz com que o utilizador se perca e não reconheça o caminho que tem de percorrer.

Motivation
Ao satisfazer esta heuristica a eficacia e a eficiencia são comprovadas. O reconhecimento vai ao encontro das expectativas do utilizador.

7. Flexibilidade e eficiência no uso

Conformance Question

O sistema adapta-se ao contexto e às preferências do utilizador? Existem atalhos?

Evidence of conformance
Não são disponibilizados atalhos para os principais menus, algo que poderia ser bastante util na primeira página.
Existe um mapa das páginas do website mas apenas contem os 2 primeiros niveis da sua estrutura densa.
Para as pessoas registadas é possivel elaborar uma lista de atalhos rápidos.

Motivation
A eficiência no uso facilita e entusiasma os utilizadores a utilizar mais dedicadamente o website. A criação de atalhos para todo o público do website é uma boa aposta. Flexibilidade e eficiência devem ser fornecidos a todos.

8. Estética e design minimalistas

Conformance Question
Existem elementos que possam dificultar ou facilitar a leitura e a compreensão da informação?

Evidence of conformance
Como já referi anteriormente, a falta de hierarquização da informação por vezes põe para segundo plano opções ou informações importantes.
A quantidade excessiva de texto corrido e por vezes com o tamanho de fonte pequeno dificulta bastante a leitura da informação.

Motivation
É importante facilitar a leitura e compreensão da informação senão o proprio sistema perde o seu objectivo na web. De que serve um website se não é compreendido pelos seus utilizadores?

9. Ajuda aos utilizadores para reconhecerem, diagnosticarem e recuperarem de erros

Conformance Question
O sistema ajuda os utilizadores a evitarem erros e a recuperarem destes?
São as mensagens de erros trasmitidas claramente ao utilizador , descrevendo o problema e sugerindo soluções?

Evidence of conformance
Quando existe uma àrea “off-limits” o utilizador é bem informado do sucedido e aconselhado ou a voltar atrás ou a fazer a autenticação no website.
A barra de localização, apesar de não muito visivel, pode ajudar o utilizador a eviar erros e voltar atrásno seu percurso.

Motivation
A barra de localização deveria ser mais visivel a fim de evitar erros, enganos e frustrações por parte dos utilizadores.


10. Ajuda e Documentação

Conformance Question
Está a ajuda apropriada disponivel ao utilizador? É facil de aceder? Está orientada para a acção do utilizador?

Evidence of conformance
A ajuda e documentação do up.pt está totalmente disponivel ao utilizador e fácil de aceder.
Existe uma ajuda contextual direccionada para qualquer duvida de navegação que os utilizadores tenham, explicando o que significam todos os elementos e icons no interface e os seus estados.


Motivation
É essencial ter uma zona de respostas a duvidas frenquentes e que ajude na orientação pelo website.