Trade and Transit with India

O desenho dessa pesquisa escolheu pela comparação entre dois grupos, segundo diferentes momentos de formação profissional. Primeiramente, diante da metodologia de avaliação educacional proposta, foi realizada a aplicação do teste para a formação de um painel de referência, formado por especialistas na área a que se refere o instrumento.

Segundo, o painel de referência deveria ser formado de acordo com os objetivos de aplicação do teste. Nesse sentido, um painel pode ser adequado para a comparação com alguns grupos, mas não com outros. Dependendo

também do grau de exigência da avaliação e da seriedade com que os resultados da avaliação serão levados em conta, esse painel pode ser modificado.

Como exemplo, poderíamos colocar a situação de uma avaliação para a obtenção de título de especialista em uma determinada área de atuação. Nessa ocasião, estaríamos avaliando pessoas potencialmente especialistas naquela área. Ainda, o objetivo desta avaliação, ou seja, determinar se um indivíduo é competente naquela área, é da mais alta responsabilidade.

Sendo assim, nesse particular cenário, o painel de referência, que não deixa de representar o julgamento sobre o potencial desempenho no teste, precisa ser formado por um grupo de excelência na área, capaz de oferecer as melhores soluções para as situações colocadas pelo teste.

Não há descrições ou discussões sobre o TCS referindo-se à questão da representatividade sócio-demográfica do painel de referência com relação aos especialistas em determinada área de atuação. Ou seja, a proporção de mulheres e homens, a faixa etária, entre outras características, não deve representar necessariamente o que se encontra dentro dessa especialidade em determinado momento ou local.

Por isso, o painel de referência precisa simplesmente ser um padrão, de modo relativo, em relação aos grupos comparados pelo teste. Não deve, necessariamente, representar de forma fidedigna o perfil da área de atuação a que se refere e não precisa conter somente ou obrigatoriamente os melhores especialistas desta área.

Outra questão a se detalhar seria o número de especialistas a formar esse painel. Gagnon et al. (2005) não coloca um número preciso ou ideal. Considerando-se as características psicométricas dos resultados encontrados por esse autor, um número mínimo de dez seria necessário para garantir a consistência interna dos resultados. Os números maiores que vinte contribuíram pouco para a melhora da acurácia do instrumento, mas de maneira alguma prejudicaram a análise.

Ainda com relação a essa questão, é preciso considerar que a maioria dos estudos sobre o TCS publicados formaram painéis de referência com especialistas de um único centro ou de poucos centros. Esta decisão pode ter

influenciado os resultados obtidos, pois garante uma maior homogeneidade entre os especialistas e limita o número de integrantes nos grupos formados. Outra explicação para essa limitação seria a dificuldade metodológica que se tem em aplicar o instrumento de forma padronizada em diferentes centros.

Além disso, esta pesquisa foi realizada com geriatras do estado de São Paulo. Mesmo considerando que suas características sócio-demográficas eram heterogeneas, principalmente a idade e o tempo de formação profissional, háque se dar relevância ainda maior ao fato que suas formações e exercícios profissionais têm um histórico bastante distinto. A geriatria em nosso meio não é uma área de saber técnico, seu ensino não é padronizado, os centros de formação podem divergir em suas prioridades e ênfases, e a sua prática profissional se abre para múltiplas atuações.

Portanto, esse estudo buscou elaborar uma proposta multi-cêntrica para a formação do painel de referência. Poderíamos ter alcançado mais do que oito centros participantes, com um número maior e, ainda assim, adequado de especialistas. Mas as dificuldades metodológicas impediram essa ampliação.

De qualquer maneira, as características do painel de referência formado não invalidam os resultados e as conclusões desta pesquisa. O número de vinte e um integrantes foi mais do que suficiente para demonstrar a variabilidade de opiniões e decisões dentro das questões elaboradas. A variabilidade do tempo de formação e experiência entre os especialistas poderia comprometer os resultados em um teste para título de especialidade, como exemplificado anteriormente. Mas demonstrou ser válido na comparação com os estudantes de graduação, como se vê nas evidências provenientes de nossos resultados.

O grupo de estudantes apresentou mais homens (58,5%) do que mulheres, tendência semelhante à do grupo de especialistas (76,2% de homens). Entretanto, o cálculo do qui-quadrado não mostrou diferença estatística entre homens e mulheres quanto ao desempenho obtido. Além disso, não há estudos sobre a influência desse fator sobre os resultados do TCS. Sendo assim, também não planejamos previamente uma determinada proporcionalidade entre os sexos, nem intra, nem inter-grupos.

Reconhece-se que não há estudos que diferenciam o raciocínio clínico entre homens e mulheres. Portanto, tentativas de comparação ou diferenciação quanto a essa característica não foram objetivos deste estudo. Contudo, pode-se questionar se alguma diferença nestas proporcionalidades poderia influenciar os resultados do teste.

Os estudos publicados sobre o TCS formam grupos de estudantes com números bastante diversos, entre 15 e 150 integrantes. O número da amostra de conveniência que conseguimos formar (41) está dentro desses limites. No entanto, números tão diversos permitem aferir que o TCS pode ser aplicado para avaliar grupos de estudantes de diversos tamanhos. Os números maiores podem contribuir para algumas características de validade, capacidade de replicação e acurácia dos resultados obtidos em pesquisas que buscam generalizar seus resultados.

Nesse sentido, amostras maiores de estudantes poderiam trazer outras interpretações aos resultados. Porém uma série de limitações metodológicas e cronológicas impediu a formação de um grupo maior. Todavia, nossas análises dos resultados demonstram que muito pode se compreender sobre as características desse grupo diante do TCS com base na amostra obtida. Nosso principal objetivo de avaliação nesta pesquisa, diferenciar especialistas de estudantes, também foi claramente alcançado.