Uma meta-avaliação de questões de escolha múltipla em estatística

• Autor(a) principal: Jasse, Jeremias José
• Data de Publicação: 2016
• Tipo de documento: Dissertação
• Idioma: por
• Título da fonte: Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
• Texto Completo: http://hdl.handle.net/10773/22197
• topic: Matemática; Estatística; Avaliação dos alunos - Metadados; Teoria de resposta ao item

Testes constituídos de questões de escolha múltipla são diversamente utilizados por professores na avaliação dos seus alunos. Porém, os resultados desses testes dizem mais do que a classificação final do aluno: aprovado ou reprovado. Neste estudo, recorrendo à Teoria Clássica de Teste (TCT) e à Teoria de Resposta ao Item (TRI), avaliamos testes constituídos por questões de escolha múltipla, considerados na unidade curricular de Bioestatística. Os objetivos foram: (i) verificar, por um lado, a qualidade global do conjunto dos 5 mini testes aplicados e, por outro lado, dos 37 itens individualmente; e (ii) analisar o nível de habilidade dos 111 alunos avaliados. As estatísticas produzidas pela TCT permitiram concluir que o conjunto dos 5 mini testes tinha boa consistência interna (com possibilidades de aumentar, eliminando uma questão tida como má) e que era composto por itens com diferentes níveis de dificuldade (28,83% - 95,50%) e de discriminação (0,0357 - 0,6586). Três modelos da TRI foram testados sendo o modelo logístico de dois parâmetros (2PL) o que apresentou melhor ajuste. Os parâmetros do modelo 2PL foram estimados pelo método de estimação da máxima verosimilhança marginal. As curvas características dos itens contribuíram para a identificação de questões com diferentes níveis de dificuldade e de discriminação. As curvas de informação de itens apresentaram o nível de contribuição de cada questão na estimação das habilidades dos alunos e, a curva de informação de teste mostrou que a discriminação máxima é atingida para alunos abaixo da média na escala de habilidade, isto é, o teste mostrou ser mais eficaz para estudantes com nível de habilidade baixa a média. Espera-se que este estudo demonstre a importância de avaliar as avaliações e motive a elaboração de testes com questões cujas características se adequem aos níveis de habilidades dos alunos, sem nunca esquecer contudo, os objetivos educacionais e as competências a fornecer. A parametrização de exercícios corresponde a uma técnica que permite considerar o mesmo conteúdo curricular sem usar, taxativamente, o mesmo enunciado. Neste trabalho ilustramos alguns exercícios parametrizados que podem ser incorporados num banco de questões.