Avaliação do desempenho do estudante de medicina pela medida da proficiência: descrição de uma metodologia de análise dos resultados do teste de progresso por meio da teoria de resposta ao item
Autor(a) principal: | |
---|---|
Data de Publicação: | 2023 |
Tipo de documento: | Tese |
Idioma: | por |
Título da fonte: | Repositório Institucional da UFJF |
Texto Completo: | https://repositorio.ufjf.br/jspui/handle/ufjf/15867 |
Resumo: | Objetivo: Avaliar, por meio da Teoria de Resposta ao Item, os resultados do Teste de Progresso em função dos níveis de proficiência e desempenho dos estudantes. Métodos: Foi realizado um estudo transversal com 1559 estudantes de Medicina brasileiros. A estimativa da proficiência e calibração dos parâmetros dos itens foi realizada pelo software BILOG MG 3.0. Para a construção da escala de proficiência, foram selecionados itens de discriminação a > 1, que quando submetidos a técnica de agrupamento por meio da metodologia k-means, formaram seis subconjuntos com níveis crescentes de proficiência. A interpretação pedagógica da escala foi obtida pela relação dos níveis de proficiência com os domínios cognitivos testados. Calculado o intervalo de confiança de 95% e aplicado o teste de Tukey, para analisar a diferença entre as médias de proficiência. Resultados: A frequência de alunos que realizou o teste foi de 94,2%. A proficiência variou de 470 a 580 pontos, com média de 500 pontos e aumentou progressivamente na graduação, um indicador de validade das medidas obtidas. A curva de ajuste dos estudantes ao teste, indicou um teste difícil e a discriminação foi moderada a alta em 61,5% dos itens. Conclusões: A análise dos resultados do Teste de Progresso realizada pela Teoria de Resposta ao Item, demonstrou ser uma ferramenta robusta para avaliar o desempenho de estudantes de Medicina |
id |
UFJF_c1a3f64aee06db75a36a9f5f22446a04 |
---|---|
oai_identifier_str |
oai:hermes.cpd.ufjf.br:ufjf/15867 |
network_acronym_str |
UFJF |
network_name_str |
Repositório Institucional da UFJF |
repository_id_str |
|
spelling |
Chebli, Julio Maria Fonsecahttp://buscatextual.cnpq.br/buscatextual/busca.doTibiriçá, Sandra Helena Cerratohttp://buscatextual.cnpq.br/buscatextual/busca.doRicardo, Djalma RabeloEzequiel, Oscarina da Silvahttp://buscatextual.cnpq.br/buscatextual/busca.doSilva, Wellingtonhttp://buscatextual.cnpq.br/buscatextual/busca.doGuedes, Ana Lúcia de Limahttp://buscatextual.cnpq.br/buscatextual/busca.dohttp://buscatextual.cnpq.br/buscatextual/busca.doRocha, Monica Couto Guedes Sejanes da2023-08-30T14:43:03Z2023-08-302023-08-30T14:43:03Z2023-07-07https://repositorio.ufjf.br/jspui/handle/ufjf/15867Objetivo: Avaliar, por meio da Teoria de Resposta ao Item, os resultados do Teste de Progresso em função dos níveis de proficiência e desempenho dos estudantes. Métodos: Foi realizado um estudo transversal com 1559 estudantes de Medicina brasileiros. A estimativa da proficiência e calibração dos parâmetros dos itens foi realizada pelo software BILOG MG 3.0. Para a construção da escala de proficiência, foram selecionados itens de discriminação a > 1, que quando submetidos a técnica de agrupamento por meio da metodologia k-means, formaram seis subconjuntos com níveis crescentes de proficiência. A interpretação pedagógica da escala foi obtida pela relação dos níveis de proficiência com os domínios cognitivos testados. Calculado o intervalo de confiança de 95% e aplicado o teste de Tukey, para analisar a diferença entre as médias de proficiência. Resultados: A frequência de alunos que realizou o teste foi de 94,2%. A proficiência variou de 470 a 580 pontos, com média de 500 pontos e aumentou progressivamente na graduação, um indicador de validade das medidas obtidas. A curva de ajuste dos estudantes ao teste, indicou um teste difícil e a discriminação foi moderada a alta em 61,5% dos itens. Conclusões: A análise dos resultados do Teste de Progresso realizada pela Teoria de Resposta ao Item, demonstrou ser uma ferramenta robusta para avaliar o desempenho de estudantes de MedicinaObjective: To evaluate, through Item Response Theory, the results of the Progress Test according to the students' proficiency and performance levels. Methods: A crosssectional study was conducted with 1559 Brazilian medical students. The estimation of proficiency and calibration of item parameters was performed using BILOG MG 3.0 software. For the construction of the proficiency scale, items with discrimination a > 1 were selected, which when submitted to the clustering technique using the k-means methodology, formed six subsets with increasing levels of proficiency. The pedagogical interpretation of the scale was obtained by relating proficiency levels to the cognitive domains tested. The 95% confidence interval was calculated and Tukey's test was applied to analyze the difference between the proficiency means. Results: The frequency of students who took the test was 94.2%. Proficiency ranged from 470 to 580 points, with a mean of 500 points, and increased progressively in graduation, an indicator of the validity of the measures obtained. The students' adjustment curve to the test indicated a difficult test and discrimination was moderate to high in 61.5% of the items. Conclusions: The analysis of the results of the Progress Test performed by Item Response Theory proved to be a robust tool to assess the performance of medical students.porUniversidade Federal de Juiz de Fora (UFJF)Programa de Pós-graduação em Saúde BrasileiraUFJFBrasilFaculdade de MedicinaAttribution-NonCommercial-NoDerivs 3.0 Brazilhttp://creativecommons.org/licenses/by-nc-nd/3.0/br/info:eu-repo/semantics/openAccessCNPQ::CIENCIAS DA SAUDEEducação médicaAvaliação educacionalCogniçãoCompetência profissionalPsicometriaMedical educationEducational assessmentCognitionProfessional competencePsychometricsAvaliação do desempenho do estudante de medicina pela medida da proficiência: descrição de uma metodologia de análise dos resultados do teste de progresso por meio da teoria de resposta ao iteminfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesisreponame:Repositório Institucional da UFJFinstname:Universidade Federal de Juiz de Fora (UFJF)instacron:UFJFORIGINALmonicacoutoguedessejanesdarocha.pdfmonicacoutoguedessejanesdarocha.pdfapplication/pdf1437438https://repositorio.ufjf.br/jspui/bitstream/ufjf/15867/1/monicacoutoguedessejanesdarocha.pdf0d4d597c41643e58f56de44fee12e0efMD51CC-LICENSElicense_rdflicense_rdfapplication/rdf+xml; charset=utf-8811https://repositorio.ufjf.br/jspui/bitstream/ufjf/15867/2/license_rdfe39d27027a6cc9cb039ad269a5db8e34MD52LICENSElicense.txtlicense.txttext/plain; charset=utf-81748https://repositorio.ufjf.br/jspui/bitstream/ufjf/15867/3/license.txt8a4605be74aa9ea9d79846c1fba20a33MD53TEXTmonicacoutoguedessejanesdarocha.pdf.txtmonicacoutoguedessejanesdarocha.pdf.txtExtracted texttext/plain136858https://repositorio.ufjf.br/jspui/bitstream/ufjf/15867/4/monicacoutoguedessejanesdarocha.pdf.txt011641e506c10c64a5e4cb9afe2cb3e5MD54THUMBNAILmonicacoutoguedessejanesdarocha.pdf.jpgmonicacoutoguedessejanesdarocha.pdf.jpgGenerated Thumbnailimage/jpeg1251https://repositorio.ufjf.br/jspui/bitstream/ufjf/15867/5/monicacoutoguedessejanesdarocha.pdf.jpgd56569d80735614b3d9d5a7a2646019eMD55ufjf/158672023-08-31 03:04:11.564oai:hermes.cpd.ufjf.br:ufjf/15867Tk9URTogUExBQ0UgWU9VUiBPV04gTElDRU5TRSBIRVJFClRoaXMgc2FtcGxlIGxpY2Vuc2UgaXMgcHJvdmlkZWQgZm9yIGluZm9ybWF0aW9uYWwgcHVycG9zZXMgb25seS4KCk5PTi1FWENMVVNJVkUgRElTVFJJQlVUSU9OIExJQ0VOU0UKCkJ5IHNpZ25pbmcgYW5kIHN1Ym1pdHRpbmcgdGhpcyBsaWNlbnNlLCB5b3UgKHRoZSBhdXRob3Iocykgb3IgY29weXJpZ2h0Cm93bmVyKSBncmFudHMgdG8gRFNwYWNlIFVuaXZlcnNpdHkgKERTVSkgdGhlIG5vbi1leGNsdXNpdmUgcmlnaHQgdG8gcmVwcm9kdWNlLAp0cmFuc2xhdGUgKGFzIGRlZmluZWQgYmVsb3cpLCBhbmQvb3IgZGlzdHJpYnV0ZSB5b3VyIHN1Ym1pc3Npb24gKGluY2x1ZGluZwp0aGUgYWJzdHJhY3QpIHdvcmxkd2lkZSBpbiBwcmludCBhbmQgZWxlY3Ryb25pYyBmb3JtYXQgYW5kIGluIGFueSBtZWRpdW0sCmluY2x1ZGluZyBidXQgbm90IGxpbWl0ZWQgdG8gYXVkaW8gb3IgdmlkZW8uCgpZb3UgYWdyZWUgdGhhdCBEU1UgbWF5LCB3aXRob3V0IGNoYW5naW5nIHRoZSBjb250ZW50LCB0cmFuc2xhdGUgdGhlCnN1Ym1pc3Npb24gdG8gYW55IG1lZGl1bSBvciBmb3JtYXQgZm9yIHRoZSBwdXJwb3NlIG9mIHByZXNlcnZhdGlvbi4KCllvdSBhbHNvIGFncmVlIHRoYXQgRFNVIG1heSBrZWVwIG1vcmUgdGhhbiBvbmUgY29weSBvZiB0aGlzIHN1Ym1pc3Npb24gZm9yCnB1cnBvc2VzIG9mIHNlY3VyaXR5LCBiYWNrLXVwIGFuZCBwcmVzZXJ2YXRpb24uCgpZb3UgcmVwcmVzZW50IHRoYXQgdGhlIHN1Ym1pc3Npb24gaXMgeW91ciBvcmlnaW5hbCB3b3JrLCBhbmQgdGhhdCB5b3UgaGF2ZQp0aGUgcmlnaHQgdG8gZ3JhbnQgdGhlIHJpZ2h0cyBjb250YWluZWQgaW4gdGhpcyBsaWNlbnNlLiBZb3UgYWxzbyByZXByZXNlbnQKdGhhdCB5b3VyIHN1Ym1pc3Npb24gZG9lcyBub3QsIHRvIHRoZSBiZXN0IG9mIHlvdXIga25vd2xlZGdlLCBpbmZyaW5nZSB1cG9uCmFueW9uZSdzIGNvcHlyaWdodC4KCklmIHRoZSBzdWJtaXNzaW9uIGNvbnRhaW5zIG1hdGVyaWFsIGZvciB3aGljaCB5b3UgZG8gbm90IGhvbGQgY29weXJpZ2h0LAp5b3UgcmVwcmVzZW50IHRoYXQgeW91IGhhdmUgb2J0YWluZWQgdGhlIHVucmVzdHJpY3RlZCBwZXJtaXNzaW9uIG9mIHRoZQpjb3B5cmlnaHQgb3duZXIgdG8gZ3JhbnQgRFNVIHRoZSByaWdodHMgcmVxdWlyZWQgYnkgdGhpcyBsaWNlbnNlLCBhbmQgdGhhdApzdWNoIHRoaXJkLXBhcnR5IG93bmVkIG1hdGVyaWFsIGlzIGNsZWFybHkgaWRlbnRpZmllZCBhbmQgYWNrbm93bGVkZ2VkCndpdGhpbiB0aGUgdGV4dCBvciBjb250ZW50IG9mIHRoZSBzdWJtaXNzaW9uLgoKSUYgVEhFIFNVQk1JU1NJT04gSVMgQkFTRUQgVVBPTiBXT1JLIFRIQVQgSEFTIEJFRU4gU1BPTlNPUkVEIE9SIFNVUFBPUlRFRApCWSBBTiBBR0VOQ1kgT1IgT1JHQU5JWkFUSU9OIE9USEVSIFRIQU4gRFNVLCBZT1UgUkVQUkVTRU5UIFRIQVQgWU9VIEhBVkUKRlVMRklMTEVEIEFOWSBSSUdIVCBPRiBSRVZJRVcgT1IgT1RIRVIgT0JMSUdBVElPTlMgUkVRVUlSRUQgQlkgU1VDSApDT05UUkFDVCBPUiBBR1JFRU1FTlQuCgpEU1Ugd2lsbCBjbGVhcmx5IGlkZW50aWZ5IHlvdXIgbmFtZShzKSBhcyB0aGUgYXV0aG9yKHMpIG9yIG93bmVyKHMpIG9mIHRoZQpzdWJtaXNzaW9uLCBhbmQgd2lsbCBub3QgbWFrZSBhbnkgYWx0ZXJhdGlvbiwgb3RoZXIgdGhhbiBhcyBhbGxvd2VkIGJ5IHRoaXMKbGljZW5zZSwgdG8geW91ciBzdWJtaXNzaW9uLgo=Repositório InstitucionalPUBhttps://repositorio.ufjf.br/oai/requestopendoar:2023-08-31T06:04:11Repositório Institucional da UFJF - Universidade Federal de Juiz de Fora (UFJF)false |
dc.title.pt_BR.fl_str_mv |
Avaliação do desempenho do estudante de medicina pela medida da proficiência: descrição de uma metodologia de análise dos resultados do teste de progresso por meio da teoria de resposta ao item |
title |
Avaliação do desempenho do estudante de medicina pela medida da proficiência: descrição de uma metodologia de análise dos resultados do teste de progresso por meio da teoria de resposta ao item |
spellingShingle |
Avaliação do desempenho do estudante de medicina pela medida da proficiência: descrição de uma metodologia de análise dos resultados do teste de progresso por meio da teoria de resposta ao item Rocha, Monica Couto Guedes Sejanes da CNPQ::CIENCIAS DA SAUDE Educação médica Avaliação educacional Cognição Competência profissional Psicometria Medical education Educational assessment Cognition Professional competence Psychometrics |
title_short |
Avaliação do desempenho do estudante de medicina pela medida da proficiência: descrição de uma metodologia de análise dos resultados do teste de progresso por meio da teoria de resposta ao item |
title_full |
Avaliação do desempenho do estudante de medicina pela medida da proficiência: descrição de uma metodologia de análise dos resultados do teste de progresso por meio da teoria de resposta ao item |
title_fullStr |
Avaliação do desempenho do estudante de medicina pela medida da proficiência: descrição de uma metodologia de análise dos resultados do teste de progresso por meio da teoria de resposta ao item |
title_full_unstemmed |
Avaliação do desempenho do estudante de medicina pela medida da proficiência: descrição de uma metodologia de análise dos resultados do teste de progresso por meio da teoria de resposta ao item |
title_sort |
Avaliação do desempenho do estudante de medicina pela medida da proficiência: descrição de uma metodologia de análise dos resultados do teste de progresso por meio da teoria de resposta ao item |
author |
Rocha, Monica Couto Guedes Sejanes da |
author_facet |
Rocha, Monica Couto Guedes Sejanes da |
author_role |
author |
dc.contributor.advisor1.fl_str_mv |
Chebli, Julio Maria Fonseca |
dc.contributor.advisor1Lattes.fl_str_mv |
http://buscatextual.cnpq.br/buscatextual/busca.do |
dc.contributor.advisor-co1.fl_str_mv |
Tibiriçá, Sandra Helena Cerrato |
dc.contributor.advisor-co1Lattes.fl_str_mv |
http://buscatextual.cnpq.br/buscatextual/busca.do |
dc.contributor.referee1.fl_str_mv |
Ricardo, Djalma Rabelo |
dc.contributor.referee2.fl_str_mv |
Ezequiel, Oscarina da Silva |
dc.contributor.referee2Lattes.fl_str_mv |
http://buscatextual.cnpq.br/buscatextual/busca.do |
dc.contributor.referee3.fl_str_mv |
Silva, Wellington |
dc.contributor.referee3Lattes.fl_str_mv |
http://buscatextual.cnpq.br/buscatextual/busca.do |
dc.contributor.referee4.fl_str_mv |
Guedes, Ana Lúcia de Lima |
dc.contributor.referee4Lattes.fl_str_mv |
http://buscatextual.cnpq.br/buscatextual/busca.do |
dc.contributor.authorLattes.fl_str_mv |
http://buscatextual.cnpq.br/buscatextual/busca.do |
dc.contributor.author.fl_str_mv |
Rocha, Monica Couto Guedes Sejanes da |
contributor_str_mv |
Chebli, Julio Maria Fonseca Tibiriçá, Sandra Helena Cerrato Ricardo, Djalma Rabelo Ezequiel, Oscarina da Silva Silva, Wellington Guedes, Ana Lúcia de Lima |
dc.subject.cnpq.fl_str_mv |
CNPQ::CIENCIAS DA SAUDE |
topic |
CNPQ::CIENCIAS DA SAUDE Educação médica Avaliação educacional Cognição Competência profissional Psicometria Medical education Educational assessment Cognition Professional competence Psychometrics |
dc.subject.por.fl_str_mv |
Educação médica Avaliação educacional Cognição Competência profissional Psicometria Medical education Educational assessment Cognition Professional competence Psychometrics |
description |
Objetivo: Avaliar, por meio da Teoria de Resposta ao Item, os resultados do Teste de Progresso em função dos níveis de proficiência e desempenho dos estudantes. Métodos: Foi realizado um estudo transversal com 1559 estudantes de Medicina brasileiros. A estimativa da proficiência e calibração dos parâmetros dos itens foi realizada pelo software BILOG MG 3.0. Para a construção da escala de proficiência, foram selecionados itens de discriminação a > 1, que quando submetidos a técnica de agrupamento por meio da metodologia k-means, formaram seis subconjuntos com níveis crescentes de proficiência. A interpretação pedagógica da escala foi obtida pela relação dos níveis de proficiência com os domínios cognitivos testados. Calculado o intervalo de confiança de 95% e aplicado o teste de Tukey, para analisar a diferença entre as médias de proficiência. Resultados: A frequência de alunos que realizou o teste foi de 94,2%. A proficiência variou de 470 a 580 pontos, com média de 500 pontos e aumentou progressivamente na graduação, um indicador de validade das medidas obtidas. A curva de ajuste dos estudantes ao teste, indicou um teste difícil e a discriminação foi moderada a alta em 61,5% dos itens. Conclusões: A análise dos resultados do Teste de Progresso realizada pela Teoria de Resposta ao Item, demonstrou ser uma ferramenta robusta para avaliar o desempenho de estudantes de Medicina |
publishDate |
2023 |
dc.date.accessioned.fl_str_mv |
2023-08-30T14:43:03Z |
dc.date.available.fl_str_mv |
2023-08-30 2023-08-30T14:43:03Z |
dc.date.issued.fl_str_mv |
2023-07-07 |
dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
dc.type.driver.fl_str_mv |
info:eu-repo/semantics/doctoralThesis |
format |
doctoralThesis |
status_str |
publishedVersion |
dc.identifier.uri.fl_str_mv |
https://repositorio.ufjf.br/jspui/handle/ufjf/15867 |
url |
https://repositorio.ufjf.br/jspui/handle/ufjf/15867 |
dc.language.iso.fl_str_mv |
por |
language |
por |
dc.rights.driver.fl_str_mv |
Attribution-NonCommercial-NoDerivs 3.0 Brazil http://creativecommons.org/licenses/by-nc-nd/3.0/br/ info:eu-repo/semantics/openAccess |
rights_invalid_str_mv |
Attribution-NonCommercial-NoDerivs 3.0 Brazil http://creativecommons.org/licenses/by-nc-nd/3.0/br/ |
eu_rights_str_mv |
openAccess |
dc.publisher.none.fl_str_mv |
Universidade Federal de Juiz de Fora (UFJF) |
dc.publisher.program.fl_str_mv |
Programa de Pós-graduação em Saúde Brasileira |
dc.publisher.initials.fl_str_mv |
UFJF |
dc.publisher.country.fl_str_mv |
Brasil |
dc.publisher.department.fl_str_mv |
Faculdade de Medicina |
publisher.none.fl_str_mv |
Universidade Federal de Juiz de Fora (UFJF) |
dc.source.none.fl_str_mv |
reponame:Repositório Institucional da UFJF instname:Universidade Federal de Juiz de Fora (UFJF) instacron:UFJF |
instname_str |
Universidade Federal de Juiz de Fora (UFJF) |
instacron_str |
UFJF |
institution |
UFJF |
reponame_str |
Repositório Institucional da UFJF |
collection |
Repositório Institucional da UFJF |
bitstream.url.fl_str_mv |
https://repositorio.ufjf.br/jspui/bitstream/ufjf/15867/1/monicacoutoguedessejanesdarocha.pdf https://repositorio.ufjf.br/jspui/bitstream/ufjf/15867/2/license_rdf https://repositorio.ufjf.br/jspui/bitstream/ufjf/15867/3/license.txt https://repositorio.ufjf.br/jspui/bitstream/ufjf/15867/4/monicacoutoguedessejanesdarocha.pdf.txt https://repositorio.ufjf.br/jspui/bitstream/ufjf/15867/5/monicacoutoguedessejanesdarocha.pdf.jpg |
bitstream.checksum.fl_str_mv |
0d4d597c41643e58f56de44fee12e0ef e39d27027a6cc9cb039ad269a5db8e34 8a4605be74aa9ea9d79846c1fba20a33 011641e506c10c64a5e4cb9afe2cb3e5 d56569d80735614b3d9d5a7a2646019e |
bitstream.checksumAlgorithm.fl_str_mv |
MD5 MD5 MD5 MD5 MD5 |
repository.name.fl_str_mv |
Repositório Institucional da UFJF - Universidade Federal de Juiz de Fora (UFJF) |
repository.mail.fl_str_mv |
|
_version_ |
1813193867648827392 |