Na fase de avaliação por especialista foram executadas todas as atividades previamente definidas para os três sítios web avaliados, o que levou em torno de três horas para cada sítio, em média.
Em seguida estão relatados os resultados alcançados com a execução desta fase, e respectivas análises.
5.1.3.1. Atividade: Avaliação da Apresentação
Esta atividade tem por objetivo avaliar a qualidade da apresentação das páginas de um sítio web no contexto de acessibilidade para deficientes visuais e estava composta inicialmente de vinte e três questões.
Em uma avaliação real de acessibilidade web utilizando o PAASDEV serão respondidas vinte e quatro questões nesta atividade, que será executada após a atividade de Avaliação da Interação, conforme proposto no processo melhorado.
O gráfico 12 representa a consolidação dos resultados sobre a apresentação dos três sítios web avaliados:
0 5 10 15 20 5 4 3 2 1 ti p o s d e n o ta quantidade de questões Sítio web 1 Sítio web 2 Sítio web 3
Gráfico 12 – Resultados alcançados na avaliação da apresentação
As questões que não se aplicavam ao sítio web avaliado receberam nota zero, como previsto no processo, e não fazem parte dos dados apresentados acima. Todos os sítios web avaliados receberam nota zero nas questões descritas a seguir, por não terem sido encontrados os casos abaixo nos sítios:
A interface destaca palavras em outro idioma?
Todo componente multimídia possui um texto equivalente?
Na execução desta atividade, percebeu-se que o especialista já deveria ter tido certo contato com o sítio web para responder às questões sobre a apresentação do sítio como um todo, e percebeu-se ainda que para responder às questões da próxima atividade, basta
encontrar e avaliar formulários e ferramentas de busca existentes no sítio web. Desta forma, o processo foi alterado para que a atividade de Avaliação da Interação seja executada antes da atividade de Avaliação da Apresentação.
O processo foi alterado ainda para inclusão de questão relativa à possibilidade de alteração no tamanho do texto e contraste de cores apresentados no sítio web em avaliação, passando então esta atividade a ter vinte e quatro questões.
5.1.3.2.Atividade: Avaliação da Interação
Esta atividade tem por objetivo avaliar a qualidade da interação das páginas de um sítio web com o usuário, no contexto de acessibilidade para deficientes visuais, e é composta de dezesseis questões.
Em uma avaliação real de acessibilidade web utilizando o PAASDEV esta atividade será executada antes da atividade de Avaliação da Apresentação, conforme proposto no processo melhorado.
O gráfico 13 representa a consolidação dos resultados sobre a interação dos três sítios web avaliados: 0 2 4 6 8 10 5 4 3 2 1 ti p o s d e n o ta quantidade de questões Sítio web 1 Sítio web 2 Sítio web 3
Gráfico 13 – Resultados alcançados na avaliação da interação
As questões que não se aplicavam ao sítio web avaliado receberam nota zero, como previsto no processo, e não fazem parte dos dados apresentados acima. Todos os sítios web
avaliados receberam nota zero nas questões descritas a seguir, por não terem sido encontrados os casos abaixo nos sítios:
A ferramenta Desfazer está disponível? Existe acesso a comandos pelo teclado?
Se existem comandos pelo teclado, estes são claros e de fácil acesso?
A seguinte questão também recebeu nota zero nos dois primeiros sítios web por não ter sido encontrado o caso abaixo:
Se existe ferramenta de ajuda, esta é clara e de fácil acesso?
Não foram detectadas melhorias no processo de execução desta atividade, exceto a já mencionada permuta na ordem de execução com a atividade predecessora.
5.1.3.3. Atividade: Avaliação da Navegação
Esta atividade tem por objetivo avaliar a qualidade da navegação das páginas de um sítio web no contexto de acessibilidade para deficientes visuais e estava composta inicialmente de quatorze questões.
Em uma avaliação real de acessibilidade web utilizando o PAASDEV serão respondidas apenas treze questões nesta atividade, conforme proposto no processo melhorado.
O gráfico 14 representa a consolidação dos resultados sobre a navegação dos três sítios web avaliados:
0 5 10 15 5 4 3 2 1 ti p o s d e n o ta quantidade de questões Sítio web 1 Sítio web 2 Sítio web 3
Gráfico 14 – Resultados alcançados na avaliação da navegação
As questões que não se aplicavam ao sítio web avaliado receberam nota zero, como previsto no processo, e não fazem parte dos dados apresentados acima. No segundo sítio web avaliado as questões descritas a seguir receberam nota zero, por não ter sido realizada autenticação via senha nesse sítio, já que o acesso era restrito a usuários credenciados:
Se existe acesso seletivo, este possui o recurso de controle de número de tentativas para digitação de senhas?
Se existe acesso seletivo, este permite que cada usuário altere sua própria senha? A seguinte questão recebeu nota zero no terceiro sítio web avaliado por não ter sido detectada variação no conteúdo apresentado após autenticação:
Se existe acesso seletivo, este é compatível com o tipo de informação que manipula?
Verificou-se ainda a ocorrência de casos em que é interessante para os deficientes visuais que haja link no início e no final da mesma página web que tenham como destino a página seguinte. Isso ficou claro na avaliação com usuários deficientes visuais em, por exemplo, páginas que apresentam resultados de pesquisa. Nesses casos, o link para ir à página seguinte deveria estar tanto no início quanto no final da página, pois o tempo que o usuário leva para mudar de página pode ser elevado se este tiver que percorrer todos os resultados até encontrar o link de alteração de página, ou então, se o link estiver somente no início da página de resultados, o usuário que chegou ao final, e quer mudar de página, deve reiniciar a leitura da página atual pelo leitor de tela, o que pode confundir o usuário na busca pelo link correto.
Portanto, como melhoria do Processo de Avaliação da Acessibilidade de Sítios Web – PAASDEV foi excluída a terceira questão inicialmente prevista para esta atividade, passando a possuir treze questões, que era:
Existem links redundantes, ou seja, que vão para a mesma página?
5.1.3.4.Atividade: Análise dos Dados de Especialista
O objetivo desta atividade é analisar os dados colhidos na fase de avaliação por especialista. São então encontrados os valores correspondentes aos indicadores de apresentação, interação e navegação. É também encontrada a pontuação da fase, com a verificação do tipo de pontuação correspondente, que pode ser de A até E, no qual o sítio é considerado satisfatoriamente acessível nesta fase se alcançar o tipo de pontuação entre A e C.
Se o sítio alcançar apenas os tipos D ou E, a avaliação de acessibilidade para deficientes visuais se encerra e é executada ainda somente a última atividade do Processo de Avaliação da Acessibilidade de Sítios Web – PAASDEV, que é a única atividade da fase de Conclusão.
Não há diferença da execução piloto para uma execução real utilizando o PAASDEV nesta atividade, com exceção das melhorias identificadas que já estão propostas na versão mais recente do processo.
Os gráficos 15, 16 e 17 representam consolidação dos resultados para os três sítios web avaliados, quanto aos indicadores de apresentação, interação e navegação:
0 0,2 0,4 0,6 0,8 1 Indicador Apresentação Sítio web 1 Sítio web 2 Sítio web 3
Gráfico 15 – Valores alcançados na análise dos dados do indicador de apresentação
0 0,2 0,4 0,6 0,8 1 Indicador Interação Sítio web 1 Sítio web 2 Sítio web 3
0 0,2 0,4 0,6 0,8 1 Indicador Navegação Sítio web 1 Sítio web 2 Sítio web 3
Gráfico 17 – Valores alcançados na análise dos dados do indicador de navegação
A partir dos resultados dos três indicadores é calculado o valor da fase de avaliação por especialista como um todo. O gráfico 18 apresenta os resultados alcançados na fase para cada um dos três sítios web que foram avaliados na execução piloto do Processo de Avaliação da Acessibilidade de Sítios Web – PAASDEV:
0 0,2 0,4 0,6 0,8 1
Fase Avaliação por Especialista
Sítio web 1 Sítio web 2 Sítio web 3
Gráfico 18 – Valores alcançados na análise dos dados da fase de avaliação por especialista
A partir dos resultados dos indicadores é calculado o valor da fase de avaliação por especialista como um todo, o que está demonstrado no gráfico anterior, para cada um dos três
sítios web que foram avaliados na execução piloto do Processo de Avaliação da Acessibilidade de Sítios Web – PAASDEV.
Ao analisar os resultados da fase, foi verificado que o primeiro sítio web avaliado alcançou o tipo de pontuação B, o segundo alcançou C, e o terceiro sítio web alcançou B. Todos eles alcançaram menções satisfatórias para esta fase, o que os habilita a prosseguir na avaliação de acessibilidade.
No processo inicialmente previsto, os resultados dos indicadores de apresentação, interação e navegação acima estavam resultando em valores muito superiores a 1, então foi determinado como melhoria no processo que os três indicadores teriam seus resultados divididos por cinco, o que corresponde aos pesos das questões atribuídos para cada resposta, com o objetivo de mitigar o desvio que havia sido apresentado.
Assim como ocorreu ao final da fase de avaliação da conformidade, na transposição desta fase para a seguinte, verificou-se a necessidade de alterar as orientações do processo no que se refere à verificação de alteração do sítio web. Para isso, não mais se busca verificar a data de atualização do sítio, e sim deve-se verificar se as páginas do sítio web selecionadas para a avaliação ainda existem. Deve-se tentar entrar em cada uma delas. Se alguma das páginas não existir, a avaliação deve retornar para o início da fase pois o sítio web será considerado alterado.