A pesquisa foi estruturada em 5 (cinco) capítulos. Cada capítulo recebeu a denominação de “olhar” à semelhança da metáfora “o olhar externo” da avaliação, constituindo em seu conjunto “os olhares da avaliação”.
Figura 2 - Os olhares da avaliação Fonte: Elaborado pela autora (2007)
“O primeiro olhar” constitui a Introdução do trabalho e apresenta a estruturação da dissertação a partir de uma contextualização da avaliação da educação superior como premissa de qualidade da educação nas sociedades contemporâneas. Refere um estado de conhecimento como balizador para análise e interpretação dos dados, apresenta os objetivos e a justificativa pela
escolha do tema e do foco da pesquisa. Apresenta também, o marco teórico, metodológico identificando-o como um estudo de caso e o delineamento da pesquisa conforme suas etapas de desenvolvimento, procurando mostrar uma visão geral do que trata o trabalho.
“O olhar da teorização” identifica o 2° capítulo, apresenta a fundamentação legal e teórica do Sistema e a base epistemológica sobre avaliação institucional que vêm norteando as políticas públicas de avaliação para a educação superior no país. Apresenta fundamentos teóricos sobre avaliação na concepção de autores estrangeiros como House e nacionais, em que se destacam Denise Leite e, notadamente, Dias Sobrinho, um dos grandes mentores da avaliação institucional que tem contribuído com suas idéias para nortear as políticas públicas de avaliação para educação superior no país.
“O olhar externo” das avaliações de curso, expresso no 3° capítulo, apresenta os resultados da interpretação dos dados quantitativos e qualitativos, tendo como fonte os Relatórios de Avaliação do Curso de Nutrição, resultantes das duas avaliações in loco, realizadas no curso no período de 2003 e 2004, respectivamente, bem como a sistematização das respostas dos questionários e das entrevistas realizadas com gestores da UNISC.
Cabe salientar que este capítulo registra também uma abordagem que não estava prevista inicialmente no projeto da pesquisa, mas que emergiu a partir da análise dos dados e foi identificada como uma variável que mereceu atenção do pesquisador, pois constatou-se uma disparidade bastante significativa entre os resultados das duas avaliações em termos de metodologias, práticas avaliativas e resultados das avaliações, que levaram aos seguintes questionamentos:
a) O que justificaria a constatação de resultados tão distintos entre uma avaliação in loco e a outra, se ambas foram realizadas no mesmo curso, com base num mesmo instrumento de avaliação, o Manual de Avaliação do Curso de Nutrição - DEAES (2002) e, num exíguo espaço de tempo entre elas?
b) Que paradigmas e concepções de avaliação teriam norteado as práticas desses avaliadores que justificassem a diferença de resultados?
A partir dessas questões, interrompeu-se a interpretação dos dados e buscou-se um aprofundamento teórico sobre paradigmas e concepções de avaliação institucional, que ao mesmo tempo em que realimentou o estado de conhecimento sobre avaliação, possibilitou ao pesquisador interpretar os dados com maior cientificidade.
O aprofundamento teórico em Paradigmas de Avaliação com base na concepção de Dias Sobrinho (2005), Leite (2005-2007) e House (1997), complementados por Saul (2000) contribuiu para que o pesquisador criasse um Modelo de Análise que contempla três concepções de
avaliação, denominadas: Modelo de Análise Experimentalista-Regulatório, Heurístico- Fenomenológico e Emancipatório. Com base neste modelo de análise foram interpretados os dados coletados e identificados com as distintas e possíveis concepções de avaliação que teriam norteado as práticas dos avaliadores por ocasião das avaliações externas no curso de Nutrição da UNISC.
“O olhar dos gestores institucionais” constitui o 4° capítulo e apresenta as percepções e opiniões dos gestores da UNISC sobre as avaliações externas de cursos: Reitor; Pró-Reitor de Planejamento e Desenvolvimento Institucional - PROPLAN, Pró-Reitora de Graduação - PROGRAD, Coordenadora Pedagógica da PROGRAD, Coordenadores do Curso de Nutrição da UNISC, quanto às contribuições e influências dos resultados das avaliações nos processos de qualificação de ações no curso de Nutrição em nível de graduação da UNISC.
“O olhar da constatação”, expresso no capítulo 5°, apresenta uma visão analítica e crítica do pesquisador sobre a realidade analisada através do estudo de caso. Registra as constatações, as interpretações e as percepções dos gestores da instituição sobre as avaliações externas de cursos, suas contribuições e influências na qualidade das ações em nível de graduação da UNISC.
Registra também algumas considerações sobre o real sentido dessas avaliações para a instituição que, além de contribuírem para a qualificação dos cursos, tem se constituído num eficiente paradigma para os processos internos de avaliação na universidade. Tece Considerações Finais e explicita as certezas provisórias que este fenômeno avaliação de curso nos permitiu construir ao longo desta extensa, apaixonante, complexa e dinâmica pesquisa.
E, a título de contribuição, registra algumas considerações e recomendações que possam subsidiar reflexões sobre políticas de avaliação institucional interna e externa de cursos de graduação.
Ao concordarmos com Yin (2005) que os estudos de caso de eventos dentro de seus contextos na vida real, é importante considerar que as evidências para um estudo de caso podem vir de várias fontes distintas: documentos, registros em arquivos, entrevistas, observação participante e artefatos físicos. Cabe ao pesquisador saber como usar estas fontes e observar princípios importantes nesta coleta de dados, entre eles:
a) várias fontes de evidências, mas que convergem ao mesmo tempo em um conjunto de fatos ou descobertas;
b) um encadeamento de evidências.
A incorporação desses princípios na investigação de um estudo de caso aumenta substancialmente sua qualidade. Para tanto, o autor sugere que os dados obtidos, por exemplo, através de documentos sejam corroborados com dados obtidos através de entrevistas.
Para Yin (2005) a etapa da coleta de dados para o estudo de caso é uma das questões que requer procedimentos adequadamente projetados, que variam dependendo do tipo de pesquisa.