Nos testes de usabilidade presencial, o utilizador foi responsável por interagir com a apli- cação de acordo com um conjunto de tarefas dadas pelo moderador. Por sua vez, o mode- rador era responsável por recolher as informações dadas pelo o utilizador por cada tarefa realizada. Para a realização destes testes foi elaborado um questionário, em que este está dividido em três secções:
• Detalhes Pessoais - Nesta secção é pedido o nome e idade do utilizador. Para além disso, é verificado se o utilizador tem conta no Facebook, e se usa alguma aplicação webpara procura, criação e partilha de eventos, de forma a identificar a experiência que o utilizador tem com este tipo de aplicações.
• Dados - Nesta secção é verificado qual o browser que o utilizador utiliza para rea- lizar as tarefas.
• Tarefas - Nesta secção é dado um conjunto de tarefas que o utilizador terá de reali- zar. Para cada tarefa é verificado se o utilizador concluiu ou não a tarefa em questão com sucesso, se esta pode ser melhorada, e a classificação da realização da tarefa, numa escala de um (muito fácil) a cinco (muito difícil).
O questionário de usabilidade está presente na secção H.
Avaliação das Tarefas
Uma tarefa é avaliada com sucesso, se o utilizador conseguir concluí-la até ao fim e se o caminho que o utilizador utilizou para concretizar a tarefa corresponde ao que era espe- rado, como por exemplo “clicar no botão Login com o Facebook”. Para classificar uma tarefa foi utilizada a palavra “Sim” como significado de sucesso, e a palavra “Não” como significado de insucesso. Para medir o grau de facilidade na concretização de uma tarefa foi utilizada uma escala numérica de um a cinco: um (muito fácil), dois (fácil), três (nem fácil nem difícil), quatro (difícil), cinco (muito difícil).
A tabela 6.1 representa as tarefas que foram realizadas pelos os utilizadores, e a tabela 6.2 representa o que era esperado que os utilizadores realizassem para concretizarem as tarefas.
Noda
Tarefa Descrição da Tarefa
1 A partir da página inicial faça Login através do Facebook e aceite todas a permissões que lhe são apresentadas.
2 Nessa mesma página, faça uma pesquisa por eventos que ocorram em Lisboa durante esta semana.
3 Procure três eventos no mapa, identifique-os na lista e veja mais informações sobre um deles.
4
No evento que escolheu, diga que vá ao evento (caso seja possível), veja as datas em, que vai ao evento, quantas pessoas vão ao evento e quantas, reviews existem.
5 Obtenha as direções para ir ao evento
6 Volte à pesquisa anterior e pesquise pelo evento “Cães Danados”, e veja mais informações sobre o mesmo.
7
Diga que vá ao evento no dia 18 se o seu amigo "Luís Rochinha" também for. E diga que não vai ao evento no dia 19. No final veja se o amigo que selecionou anteriormente vai ao evento. 8 Vá ao evento no dia 19 e adicione, ao seu Google Calendar.
9
Verifique se recebeu alguma notificação. Caso tenha recebido marque como lida a notificação. No final identifique o tipo de notificação(se está relacionado com a opção VOU SE ou se é relacionado com a opção do organizador).
10
Crie dois eventos: um evento único, e um evento recorrente que comece hoje e acabe dentro de um mês, e que ocorra todas as segundas-feiras.
11 Veja os eventos que criou, elimine o evento recorrente e edite o evento único, alterando o tipo de recorrência para recorrente. 12 Procure o evento "Teste Seguidor", veja mais informações sobre
o mesmo, e siga o organizador desse evento.
13 Veja os organizadores que segue e deixe de seguir o organizador "Luís Rochinha".
14 Visualize todos os eventos a que vai.
15 Pesquise pelo evento "50 sombras"e adicione-o à whishlist e no final veja a lista de wishlist.
16 Atualize as informações e interesses do seu perfil.
17 Procure pelo evento "Teste Seguidor"e veja o perfil do organizador desse evento.
Noda
Tarefa Esperado
1 Utilizador clicar no botão do "Login com o Facebook".
2 Preencher o campo localidade e selecionar a opção "Esta semana". 3 Selecionar três marcadores no mapa, e por cada marcador no mapa
clicado identificar o respetivo evento na lista de eventos. 4 Clicar no botão "Vou"e de seguida clicar no botão "Ver Datas". 5 Carregar num dos botões de "Obter Direções".
6 Clicar no botão "Voltar à Pesquisa".
7 Clicar no botão "Vou Se", depois clicar em "Não Vou"e no botão "Ver Amigos".
8 Clicar em "Vou"e depois em "Adicionar ao Google Calendar". 9 Carregar em "Notificações"na barra de navegação e clicar em "Ler". 10 Clicar no botão “Criar Evento” na barra de navegação e criar esses
dois eventos.
11 Ir ao dropdown da barra de navegação clicar em "Meus Eventos", clicar em "Eliminar"evento recorrente, e clicar em "Editar"o evento. 12 Ir para a pesquisa, procurar o evento e clicar no botão
"Seguir: Luis Rochinha".
13 Ir ao dropdown da barra de navegação clicar em "Meus Organizadores" e clicar em "não seguir".
14 Ir ao dropdown da barra de navegação clicar em "Quando Vou". 15 Clicar no coração para adicionar à Wishlist.
16 Ir ao dropdown da barra de navegação clicar em, "Meu Perfil", clicar no botão atualizar perfil e interesses.
17 Clicar no botão "Voltar à Pesquisa"e clicar na imagem do organizador. Tabela 6.2: Tabela do que é esperado por cada tarefa
Resultados
No total foram inquiridos nove utilizadores com idades entre os vinte e quatro anos e os vinte oito anos, que realizaram todas as tarefas presentes no questionário dadas pelo moderador. Dos nove utilizadores apenas três utilizam uma aplicação web para procura, criação e partilha de eventos, sendo que a aplicação em questão é o Facebook. Todos os utilizadores têm conta no Facebook e todos eles utilizaram o browser Google Chrome para a realização das tarefas.
Com base nos dados recolhidos pelo questionário de usabilidade, foi possível concluir que em média 91,50% das tarefas foram concluídas com êxito pelos nove utilizadores, sendo que em média 8,50% das tarefas não foram concluídas com êxito.
A figura 6.1 representa a percentagem de conclusão de cada tarefa realizada pelos nove utilizadores.
Figura 6.1: Percentagem de conclusão de cada tarefa
De acordo com gráfico representado na figura acima, podemos verificar que a tarefa na qual os utilizadores sentiram mais dificuldade em realizar foi a tarefa 17. Nenhum dos utilizadores conseguiu concluí-la e a opinião entre os utilizadores foi unânime. A principal dificuldade revelada pelos utilizadores foi o fato de a imagem do evento ter o mesmo tom que a imagem do organizador (ver figura 6.2), não conseguindo identificar o círculo com a imagem do organizador no qual deviam de clicar para concluir a tarefa.
A tarefa 15 não foi concluída com sucesso por 44% dos utilizadores, e mais uma vez a opinião foi unânime. A principal dificuldade encontrada por estes utilizadores, foi o fato de não conseguirem perceber o que significavam os ícones quando pairavam o rato sobre uma imagem de um evento na lista de eventos, como está ilustrado na figura 6.3. Esta dificuldade levou parte dos utilizadores, a visualizar a página do evento em questão para tentar concluir a tarefa, levando assim ao insucesso desta tarefa.
Figura 6.3: Over de uma imagem de um evento na lista de eventos
A tarefa 3, apenas 11,12% dos utilizadores não conseguiu concluir com sucesso a tarefa em questão. A principal dificuldade encontrada, foi o fato de os botões terem a mesma cor de fundo que a página do evento (ver figura 6.4), não conseguindo encontrar os respetivos botões para concluir a tarefa.
Figura 6.4: Botões para visualizar as datas, amigos e adicionar ao Google Calendar
As restantes tarefas foram concluídas com sucesso por todos os utilizadores.
Por cada tarefa realizada, foi questionado aos utilizadores se estes melhoravam ou não a tarefa em questão, de modo a perceber quais as tarefas que podiam apresentar mais dificuldades na sua realização. A figura 6.5 representa a percentagem de melhoramento ou não de cada tarefa sugerido pelos utilizadores. Destes resultados, vamos apenas abordar
as tarefas que podem ser melhoradas e que tenham uma percentagem acima dos 40%. Foi estabelecido este valor, uma vez que a opinião dos utilizadores na sua grande maioria, é comum entre todos. Abaixo dos 40% a opinião não se considerou tão relevante uma vez que a opinião não é comum a todos os utilizadores.
Figura 6.5: Percentagem de melhoramento ou não melhoramento de cada tarefa
Na figura 6.5 podemos retirar informações relevantes sobre quais as principais tarefas que devem ser melhoradas, de acordo com as sugestões dadas pelos utilizadores. Na ta- refa 3, 44,45% dos utilizadores respondeu que melhorava a tarefa se o sombreado de cada caixa na lista de eventos fosse clicável, ou seja, se permitisse ver mais informações do evento ao clicar na caixa que representa cada evento. Na tarefa 15, 44,45% dos utilizado- res respondeu que melhorava a tarefa através da inclusão de um “pop-up” nos ícones, para entender o que significa cada um deles. Na tarefa 17, 100% dos utilizadores respondeu que melhorava a tarefa através da inclusão de um campo que identificasse o organizador.
No questionário de usabilidade, para cada tarefa o utilizador classificou o grau de dificuldade na realização da mesma, numa escala de um (muito fácil) a cinco (muito difícil). Esta classificação permite saber se as tarefas são fáceis ou difíceis de concretizar. A figura 6.6 representa a média de dificuldade na realização de cada tarefa pelos nove utilizadores, em que os valores apresentados foram arredondados às unidades.
Figura 6.6: Escala de dificuldade de cada tarefa
A partir desta figura podemos concluir que as tarefas 15 e 17 foram consideras as mais difíceis de concretizar pelos utilizadores, com as mesmas razões apontadas anteriormente na percentagem de conclusão de cada tarefa 6.1. A tarefa 3 foi considerada pelos uti- lizadores nem muito fácil, nem muito difícil de concretizar. As restantes tarefas foram classificadas como fáceis e muito fáceis de concretizar. Com isto, podemos concluir que em média as tarefas foram fáceis de concretizar.
Todas as tarefas que apresentavam dificuldades acrescidas ao utilizador, nomeada- mente as tarefas 17, 15 e 3, foram melhoradas. Estas tarefas foram consideradas como prioritárias para serem recolvidas, de modo a que futuros utilizadores tenham uma melhor experiência de utilização.