Conceito global para alunos de medicina em estagio clinico : comparação entre auto-avaliação, avaliação de docentes e pares

Detalhes bibliográficos
Autor(a) principal: Domingues, Rosangela Curvo Leite
Data de Publicação: 2008
Tipo de documento: Tese
Idioma: por
Título da fonte: Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP)
Texto Completo: https://hdl.handle.net/20.500.12733/1608330
Resumo: Orientadores: Eliana Martorano Amaral, Angelica Maria Bicudo Zeferino
id UNICAMP-30_eb5df5844bf2b76d870df7dd7ad3264b
oai_identifier_str oai::435360
network_acronym_str UNICAMP-30
network_name_str Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP)
repository_id_str
spelling Conceito global para alunos de medicina em estagio clinico : comparação entre auto-avaliação, avaliação de docentes e paresGlobal rating for medical students in clinical clerkship : comparison between self, faculty and peer assessmentEducação médicaEstudantes universitários - AvaliaçãoMedical educationStudents, medical - EvaluationOrientadores: Eliana Martorano Amaral, Angelica Maria Bicudo ZeferinoTese (doutorado) - Universidade Estadual de Campinas, Faculdade de Ciencias MedicasResumo: Objetivo: Relacionar o Conceito Global Itemizado com o Conceito Geral dos alunos do 4º ano de Medicina, atribuídos por três tipos de avaliadores (docentes, colegas e próprio aluno) e compará-lo com os outros métodos de avaliação das competências esperadas no atendimento em unidade de atenção primária. Sujeitos e métodos: Foram estudadas as notas atribuídas a estudantes do 4º ano (n=106), por docentes (n=19), pelos próprios alunos e por colegas, ao final de um módulo de ensino que se desenvolve em 6 unidades básicas de saúde, sob supervisão de docentes e tutores de Ginecologia e Obstetrícia (GO), Clínica Médica (CM) e Pediatria (Ped). Os docentes forneceram uma nota (0 a 10) que resumia as competências do aluno no semestre, cuja média foi definida como Conceito Geral (CG). Depois de duas semanas, os mesmos docentes preencheram o formulário pré-testado do Conceito Global Itemizado (CGI) para os mesmos alunos, que continha 6 domínios de competências técnicas (CGIt) e 7 de competências humanísticas (CGIh). Os alunos preencheram formulários iguais (de CG e de CGI) para realizar sua auto-avaliação e apenas a parte das competências humanísticas (CGIh) para anonimamente avaliar 3-4 colegas que compunham o seu grupo. Por meio de um instrumento auto-respondido, também expressaram sua opinião sobre o exercício de se auto-avaliar e de avaliar seus colegas. As notas de CGI foram comparadas com notas provindas de outros métodos de avaliação: Provas Teóricas (Pt), Portfólio (Pf) e Avaliação Estruturada (AE). A análise estatística incluiu estatísticas descritivas, análise fatorial, coeficientes de Cronbach, testes de Friedman e de Wilcoxon para dados emparelhados, coeficientes de correlação de Pearson e de Spearman, modelos de análise de variância (ANOVA) e distâncias Euclidianas. Assumiu-se o nível de significância de 5%. Foi utilizado o programa SPSS Versão 10.0. O projeto foi aprovado pelo Comitê de Ética e Pesquisa da instituição. Resultados: Houve predominância de notas elevadas e discriminação reduzida entre os alunos. A consistência interna do questionário de CGI foi elevada para todos os avaliadores (alfa de Cronbach > 0,881). As notas de CG dos alunos foram significativamente inferiores às dos docentes (diferença de medianas = 0,41). As notas de CG foram significativamente inferiores às notas do CGI na avaliação docente (diferença de medianas = 0,13), mas não na auto avaliação e tiveram maior concordância e correlação com as notas de CGIt (r= 0,873 docente, r= 0,715 auto-avaliação) do que com as de CGIh (r= 0,614 docente, r= 0,481 auto-avaliação). As notas de CGIh foram significativamente mais elevadas do que as de CGIt, tanto na auto-avaliação (diferença de medianas = 0,17) quanto na avaliação docente (diferença de medianas = 0,19), com modestas correlações entre elas (r= 0,62 docentes, r= 0,61 auto-avaliação). Os alunos atribuíram notas significativamente mais baixas para os colegas do que para si mesmos (CGIh, diferença de medianas = 0,36). As correlações entre as notas dos três tipos de avaliadores para todos os domínios do CGI foram muito pobres e, em geral, não significativas. As notas dos docentes de Ped foram significativamente inferiores às dos docentes de GO e CM (diferenças de medianas entre 0,50 e 0,67), com correlações baixas entre elas (-0,02<r<0,48). A maior discordância ocorreu entre as notas de GO e Ped, em todos os métodos. Os domínios que tiveram maior impacto na confiabilidade do CGI foram: Exame físico, Solução de problemas, Capacidade de auto-reflexão e Julgamento clínico. Hábitos de trabalho poderia ser excluído do instrumento itemizado. 90,6% dos alunos/avaliadores avaliaram todos os seus colegas de grupo. Houve indicações de reciprocidade e constância no padrão das notas entre pares e situações sugestivas de conflitos interpessoais. Os alunos se sentiram mais confortáveis e preparados para a auto-avaliação do que para a avaliação dos colegas (diferença de 34,4% e 17,7%, respectivamente) e julgaram a auto-avaliação mais justa e valiosa do que a avaliação dos colegas (diferença de 4,2% e 34,7%, espectivamente). Houve diferenças significativas entre as distribuições das notas de todos os métodos, com notas mais elevadas na AE (mediana = 9,27). Houve correlação forte e significativa (r= 0,719) e maior concordância entre as notas da AE e as do CGI. Conclusão: Os alunos foram mais rigorosos consigo mesmo do que os docentes no CG e nos atributos técnicos do CGI e com seus pares nos atributos humanísticos do CGI. As notas do CG foram inferiores às do CGI para os docentes, mas não para os próprios alunos e enfocaram principalmente as competências técnicas dos estudantes. O CGI mostrou-se uma estratégia válida e confiável para compor o conjunto de métodos de avaliação dos estudantes do 4º ano de medicina, em estágio clínico.Abstract: Purpose: To correlate the Global Itemized Rating with the Global Overall Rating attributed to Y4 medical students by three types of assessors (faculty, peers and self), and to compare it with other assessment methods used to evaluate learners in clinical clerkship, at the primary level of care. Subjects and Methods: The focus of the present study were ratings attributed to Y4 medical students (n= 106) by faculty members (n= 19), by own students and peers, at the end of a teaching module conducted at 6 primary care centers, and supervised by faculties and tutors from Obstetric and Gynecology (O&G), Internal Medicine (IM) and Pediatrics (Ped). Faculties provided a summative global numeric rating, ranging from 0 to 10, which summarized student's competencies during the clerkship. Faculty global scores across disciplines were averaged and defined as a Global Overall Rating (GOR). Two weeks after securing GOR ratings for all students, the same faculty members assessed the same students using in a pre-tested Global Itemized Rating, named GIR, which encompassed thirteen domains: six referred to technical skills (GIRt), and seven to humanistic skills (GIRh). Students completed similar GOR and GIR forms for self-assessment, and the humanistic scoring components of the GIR form to anonymously assess three to five working-group peers. Students answered a questionnaire on their perceptions to the experience as self and peer raters. GIR ratings were compared with ratings from other assessment methods: Multiple-choice questions (MCQs), Portfolio (Pf) and Real-case structured clinical assessment (RC-SCA). Statistical analyses included descriptive statistics, factor analysis, Cronbach's alpha, Friedman test, Wilcoxon signed rank test, Pearson and Spearman correlation coeffients, ANOVA models and Euclidean distances. Statistical significance was set at P<0.05. Statistical analyses were performed using SPSS program, version 10.0. Ethical approval was obtained. Results: Distributions were negatively skewed and reduced discrimination among students was observed. GIR internal consistency was high, across all types of raters (Cronbach's alpha > 0.881). Students' GOR ratings were significantly lower than faculties' (median difference = 0.41). GOR ratings were significantly lower than GIR ratings for faculty (median difference = 0.13), but not for self, and showed stronger agreement and correlation with GIRt (r= 0.873 for faculty and r= 0.715 for self) than with GIRh (r= 0.614 for faculty and r= 0.481 for self). GIRh ratings were significantly higher than GIRt (median difference = 0.17 for self and 0.19 for faculty), with modest correlations between them (r= 0.62 for faculty and r= 0.61 for self). Learners attributed lower mean ratings to their fellow students than to themselves (CGIh median difference = 0.36). Correlations between faculty, self and peer scores were very poor in all domains, and generally non significant. Ped scores were significantly lower than O&G and IM (median differences between 0.50 and 0.67), with low correlations between them (-0.02<r<0.48). O&G and Ped scores showed greater disagreement, in all methods. The domains that had greater impact on the reliability of the scale were: Physical examination, Problem-solving, Self- reflective skills and Clinical Judgment. Work habits could be excluded from the itemized form. 90.6% of the learners/raters assessed all their group-peers. Patterns of reciprocity and constancy in ratings, and some situations suggesting conflicts were noticed in working groups. Learners expressed to be more comfortable and prepared for self than for peer assessment (difference = 34.4% and 17.7%, respectively), and considered self-assessment more fair and valuable than peer assessment (difference = 4.2% and 34,7%, respectively). There were significant differences between score distributions in all assessment methods, with higher ratings in RC-SCA (median = 9.27). RC-SCA and GIR showed strong and significant correlations (r= 0.719) and greater agreement. Conclusion: Learners were sctricter with themselves than faculty in GOR and in GIR technical domains, and with their colleagues in GIR humanistic domains. GOR ratings were lower than GIR ratings for faculty, but not for self, and focused mainly on students' technical skills. GIR has shown to be a valid and reliable strategy, which can make up the set of assessment methods used to evaluate fouth-year students in clinical clerkship.DoutoradoCiências BiomédicasDoutor em Tocoginecologia[s.n.]Amaral, Eliana Martorano, 1960-Bicudo, Angélica Maria, 1955-Martins, Milton de ArrudaTroncon, Luiz Ernesto de AlmeidaGuerra Júnior, GilPinto-Neto, Aarão MendesUniversidade Estadual de Campinas (UNICAMP). Faculdade de Ciências MédicasPrograma de Pós-Graduação em TocoginecologiaUNIVERSIDADE ESTADUAL DE CAMPINASDomingues, Rosangela Curvo Leite2008info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesisapplication/pdf252 p. : il.https://hdl.handle.net/20.500.12733/1608330DOMINGUES, Rosangela Curvo Leite. Conceito global para alunos de medicina em estagio clinico: comparação entre auto-avaliação, avaliação de docentes e pares. 2008. 252 p. Tese (doutorado) - Universidade Estadual de Campinas, Faculdade de Ciencias Medicas, Campinas, SP. Disponível em: https://hdl.handle.net/20.500.12733/1608330. Acesso em: 2 set. 2024.https://repositorio.unicamp.br/acervo/detalhe/435360porreponame:Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP)instname:Universidade Estadual de Campinas (UNICAMP)instacron:UNICAMPinfo:eu-repo/semantics/openAccess2017-06-05T09:50:25Zoai::435360Biblioteca Digital de Teses e DissertaçõesPUBhttp://repositorio.unicamp.br/oai/tese/oai.aspsbubd@unicamp.bropendoar:2017-06-05T09:50:25Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP) - Universidade Estadual de Campinas (UNICAMP)false
dc.title.none.fl_str_mv Conceito global para alunos de medicina em estagio clinico : comparação entre auto-avaliação, avaliação de docentes e pares
Global rating for medical students in clinical clerkship : comparison between self, faculty and peer assessment
title Conceito global para alunos de medicina em estagio clinico : comparação entre auto-avaliação, avaliação de docentes e pares
spellingShingle Conceito global para alunos de medicina em estagio clinico : comparação entre auto-avaliação, avaliação de docentes e pares
Domingues, Rosangela Curvo Leite
Educação médica
Estudantes universitários - Avaliação
Medical education
Students, medical - Evaluation
title_short Conceito global para alunos de medicina em estagio clinico : comparação entre auto-avaliação, avaliação de docentes e pares
title_full Conceito global para alunos de medicina em estagio clinico : comparação entre auto-avaliação, avaliação de docentes e pares
title_fullStr Conceito global para alunos de medicina em estagio clinico : comparação entre auto-avaliação, avaliação de docentes e pares
title_full_unstemmed Conceito global para alunos de medicina em estagio clinico : comparação entre auto-avaliação, avaliação de docentes e pares
title_sort Conceito global para alunos de medicina em estagio clinico : comparação entre auto-avaliação, avaliação de docentes e pares
author Domingues, Rosangela Curvo Leite
author_facet Domingues, Rosangela Curvo Leite
author_role author
dc.contributor.none.fl_str_mv Amaral, Eliana Martorano, 1960-
Bicudo, Angélica Maria, 1955-
Martins, Milton de Arruda
Troncon, Luiz Ernesto de Almeida
Guerra Júnior, Gil
Pinto-Neto, Aarão Mendes
Universidade Estadual de Campinas (UNICAMP). Faculdade de Ciências Médicas
Programa de Pós-Graduação em Tocoginecologia
UNIVERSIDADE ESTADUAL DE CAMPINAS
dc.contributor.author.fl_str_mv Domingues, Rosangela Curvo Leite
dc.subject.por.fl_str_mv Educação médica
Estudantes universitários - Avaliação
Medical education
Students, medical - Evaluation
topic Educação médica
Estudantes universitários - Avaliação
Medical education
Students, medical - Evaluation
description Orientadores: Eliana Martorano Amaral, Angelica Maria Bicudo Zeferino
publishDate 2008
dc.date.none.fl_str_mv 2008
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/doctoralThesis
format doctoralThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://hdl.handle.net/20.500.12733/1608330
DOMINGUES, Rosangela Curvo Leite. Conceito global para alunos de medicina em estagio clinico: comparação entre auto-avaliação, avaliação de docentes e pares. 2008. 252 p. Tese (doutorado) - Universidade Estadual de Campinas, Faculdade de Ciencias Medicas, Campinas, SP. Disponível em: https://hdl.handle.net/20.500.12733/1608330. Acesso em: 2 set. 2024.
url https://hdl.handle.net/20.500.12733/1608330
identifier_str_mv DOMINGUES, Rosangela Curvo Leite. Conceito global para alunos de medicina em estagio clinico: comparação entre auto-avaliação, avaliação de docentes e pares. 2008. 252 p. Tese (doutorado) - Universidade Estadual de Campinas, Faculdade de Ciencias Medicas, Campinas, SP. Disponível em: https://hdl.handle.net/20.500.12733/1608330. Acesso em: 2 set. 2024.
dc.language.iso.fl_str_mv por
language por
dc.relation.none.fl_str_mv https://repositorio.unicamp.br/acervo/detalhe/435360
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
252 p. : il.
dc.publisher.none.fl_str_mv [s.n.]
publisher.none.fl_str_mv [s.n.]
dc.source.none.fl_str_mv reponame:Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP)
instname:Universidade Estadual de Campinas (UNICAMP)
instacron:UNICAMP
instname_str Universidade Estadual de Campinas (UNICAMP)
instacron_str UNICAMP
institution UNICAMP
reponame_str Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP)
collection Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP)
repository.name.fl_str_mv Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP) - Universidade Estadual de Campinas (UNICAMP)
repository.mail.fl_str_mv sbubd@unicamp.br
_version_ 1809188997710217216

Registros relacionados