O terceiro ciclo de IA corresponde aos anos letivos 2013/14 e 2014/15 para as UC que eram lecionadas no 2.º semestre e corresponde somente ao ano letivo 2014/15 para as UC do 1.º semestre. Conseguiu-se que no 2.º semestre de 2013/14 as salas que pretendíamos já estivessem devidamente equipadas para a realização dos testes. Este ciclo consistiu na execução de melhoramentos no processo de avaliação e na realização dos testes durante as aulas e nas salas habituais das turmas. Dois aspetos essenciais caracterizaram o 3.º ciclo de IA: i) realização dos testes sumativos de avaliação contínua na sala de aula normal de cada turma; ii) realização de Testes de “Repescagem”.
Como foi descrito na reflexão do ciclo anterior, era importante que os alunos fossem avaliados na própria sala de aula, não tendo necessidade de se deslocarem para outras instalações, que era o que acontecia no ciclo anterior. Assim, foi proposto à escola que se apetrechassem mais algumas salas de aula, que eram usadas regularmente para lecionação, com condições iguais às 4 salas que em anos anteriores tinham sido usadas na nossa avaliação. Assim, foram equipadas mais 14 salas com este tipo de equipamento. Foi pedido aos responsáveis pelos horários que na atribuição de salas de aula aos docentes que lecionavam as UC da Área Científica de Matemática com esta forma de avaliação, lhes fossem atribuídas determinadas salas (as que continham as condições necessárias para a realização da avaliação), sendo essa indicação dada pelo Coordenador da Área Científica de Matemática. Na primeira reunião de docentes neste novo ciclo de IA decidiu-se aprofundar as condições necessárias à realização do Teste de “Repescagem” que tinha sido sugerido no final do ciclo de IA anterior. Assim, foram definidas
as condições para que os alunos pudessem realizar este teste nomeadamente, os alunos teriam de ter realizado todos os testes e não ter conseguido classificação final positiva. Apenas estes poderiam fazer um Teste de “Repescagem” na última semana do semestre. Esse teste substituiria um dos testes de avaliação contínua, sendo a classificação final recalculada. A escolha deste teste era feita no próprio dia do teste, não tendo os alunos necessidade de indicar com antecedência qual o teste a realizar. Observe-se que os alunos que faltassem a algum dos testes não poderiam fazer o Teste de “Repescagem”.
Para controlar os alunos que poderiam ou não fazer o teste e para que as classificações fossem automaticamente recalculadas, foi definido um conjunto de procedimentos implementados em MS Excel™ para este efeito. As informações do Moodle eram exportadas em formato MS Excel™ e, depois de eliminada alguma informação desnecessária, essas informações eram copiadas para determinadas folhas de cálculo. Era automaticamente verificado se o aluno tinha efetuado somente um teste ou não, e ainda se estava nas condições assinaladas (em caso afirmativo, a classificação final era recalculada automaticamente).
Em termos de avaliação geral, como se poderá verificar na secção 9.1, houve claramente melhores médias e percentagens de classificações positivas dos alunos. Observou-se ainda uma menor desistência da avaliação contínua por parte dos alunos.
Para avaliação deste 3.º ciclo, foram ainda efetuadas entrevistas a docentes e um questionário aos alunos. Foi feita a análise dos dados recolhidos, de modo a aferir as mudanças nas práticas educativas resultantes da implementação deste processo de avaliação através da realização de testes com QEM implementados na plataforma Moodle.
Após a conclusão deste ciclo de IA, foi feita uma reflexão, em reunião de docentes realizada para o efeito, e algumas conclusões foram retiradas e apresentadas sugestões de alterações, a serem implementadas em anos posteriores:
houve um aumento considerável de alunos que assistiam às aulas até final do semestre, em particular no 2.º;
houve uma melhoria considerável das classificações;
haverá ainda necessidade de reavaliar as questões através da TRI;
dever-se-á melhorar o controlo à fraude no que diz respeito ao uso dos telemóveis; dever-se-ão resolver alguns problemas com a versão do Moodle, no que concerne ao
uso do TeX, instalando uma nova versão.
Na Tabela 12 encontra-se um resumo dos 3 ciclos de IA desenvolvidos nesta investigação, considerando-se as diversas fases de cada um deles.
Tabela 12: Resumo dos 3 ciclos de IA
1.º Ciclo 2.º Ciclo 3.º Ciclo
Planificação Foi diagnosticado, em reuniões de área científica, o problema de existir um número demasiado elevado de alunos, o que dificultava a realização de
avaliação contínua de forma justa e eficaz; Foi definida uma estratégia de avaliação contínua, utilizando QEM implementadas no
Moodle, quer como
avaliação formativa quer sumativa;
Foram definidas regras para a elaboração das QEM e dos testes gerados aleatoriamente pelo Moodle;
Foi definido um processo de revisão para a elaboração das QEM.
Foi planeada a extensão da utilização das QEM para avaliação sumativa presencial;
Foi planeada a
implementação da avaliação sumativa presencial durante o horário normal das turmas;
Ação Construção de um banco de QEM;
Implementação de testes com QEM, pondidos pelos alunos como trabalho de casa. Utilização de um questionário para a análise, por parte dos intervenientes, das linhas de orientação existentes para elaboração de QEM.
Análise das QEM do banco de questões utilizando a TRI e a TCT. Criação das condições tecnológicas necessárias para a realização dos testes presenciais para avaliação sumativa. Ajustamentos e
introdução de melhorias no banco de QEM.
Criação das condições tecnológicas e
organizacionais necessárias para a realização dos testes presenciais para avaliação sumativa na sala de aula durante o horário normal das turmas;
Implementação do teste de “Repescagem”
Realização de um questionário aos alunos; Realização de entrevistas aos docentes.
Observação Análise dos dados obtidos na fase anterior;
Análise dos dados obtidos na fase anterior;
Análise dos dados obtidos na fase anterior;
Reflexão Análise crítica do processo desenvolvido, por parte do autor da tese e de todos os docentes envolvidos.
Análise crítica do processo desenvolvido, por parte do autor da tese e de todos os docentes envolvidos.
Análise crítica do processo desenvolvido, por parte do autor da tese e de todos os docentes envolvidos.
1.º Ciclo 2.º Ciclo 3.º Ciclo
Foi feita a deteção da necessidade de uma análise mais aprofundada das questões desenvolvidas. Possibilidade de implementar um processo de e-assessement para avaliação contínua sumativa com o Moodle.
Necessidade de apetrechar mais salas com as condições necessárias para a realização dos testes no
Moodle.
Necessidade de realizar um Teste de
“Repescagem”. Necessidade de encontrar formas para minimizar as fraudes por parte dos alunos.
Verificou-se uma melhoria considerável das
classificações.
Necessidade de reavaliar as questões com a TRI. Necessidade de melhorar ainda mais o controlo à fraude.
Necessidade de resolver problemas com as novas versões do Moodle.