Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica

Detalhes bibliográficos
Autor(a) principal: Ferreira, Maíra Lucília Monteiro
Data de Publicação: 2022
Tipo de documento: Dissertação
Idioma: por
Título da fonte: Biblioteca Digital de Teses e Dissertações da UNIFENAS
Texto Completo: http://tede2.unifenas.br:8080/jspui/handle/jspui/311
Resumo: Introduction: Assessment based on Entrustable Professional Activities (EPAs) consists of attributing confidence to the learner to perform tasks that represent professional practice, and involves monitoring the learner for a continuous period, with performance analysis, through direct observation, encouragement of self-reflection, and prompt feedback. This set of observations and analysis subsidizes a Clinical Competence Committee (CCC) final decision that assigns a certain level of confidence. The aim of the present study is to analyze the process of improvement of the evaluation system based on EPA in Pediatrics, based on the existing initiative in the medical emergency internship. Methods: In this context, the EPA already used was improved, and standardized, and a CCC was created. The evaluators were trained to apply the new method and the residents were introduced to it. The application of the evaluation method took place for 6 months with residents in the medical emergency internship. At the end of the internship, the CCC created a report for each resident with the result of the evaluation. Subsequently, a questionnaire was applied regarding the perception of residents and evaluators about the changes made during the project, and their data were analyzed. Results: The confidence levels achieved by residents in the CCC were compatible with expected first-year resident knowledge. Regarding the evaluations obtained, there was a reduction over time, which can be improved with resident involvement as an active part of the assessment and also by asking the supervisors fulfill them. In the feedback tool, the most frequent words were “effective communication”, “disease scripts”, “clinical reasoning” and “differential diagnoses”. The perception questionnaire analysis shows that supervisors and residents have a preference for EPA based assessment, considering it as a good form of performance assessment, easy to understand, and useful for learning and feedback. Conclusion: The implementation of an EPA based assessment improves the quality of assessments and results in more assertive feedback. Nevertheless, it can face resistance from the evaluator’s teams and also from the residents. In order to avoid it, one should invest in continuous training sessions. The simplification of the process can be obtained by using online forms with immediate feedback. Other programs are expected to analyze this experience and use it to disseminate EPA-based assessment that is believed to be beneficial to the resident's teaching-learning process.
id UNFE_5f97a3afb85a1a72c3104314ef9e089b
oai_identifier_str oai:tede2.unifenas.br:jspui/311
network_acronym_str UNFE
network_name_str Biblioteca Digital de Teses e Dissertações da UNIFENAS
repository_id_str
spelling Moura, Alexandre SampaioCandini, Talitah Michel SanchezToledo Júnior, Antônio Carlos de CastroPenido, Maria Goretti Moreira GuimarãesFerreira, Maíra Lucília Monteiro2023-06-14T11:36:00Z2022-11-09FERREIRA, Maíra Lucília Monteiro. Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica. 2022. 96.f Dissertação( Programa de Mestrado em Ensino em Saúde) - Universidade Professor Edson Antônio Velano, Belo Horizonte .http://tede2.unifenas.br:8080/jspui/handle/jspui/311Introduction: Assessment based on Entrustable Professional Activities (EPAs) consists of attributing confidence to the learner to perform tasks that represent professional practice, and involves monitoring the learner for a continuous period, with performance analysis, through direct observation, encouragement of self-reflection, and prompt feedback. This set of observations and analysis subsidizes a Clinical Competence Committee (CCC) final decision that assigns a certain level of confidence. The aim of the present study is to analyze the process of improvement of the evaluation system based on EPA in Pediatrics, based on the existing initiative in the medical emergency internship. Methods: In this context, the EPA already used was improved, and standardized, and a CCC was created. The evaluators were trained to apply the new method and the residents were introduced to it. The application of the evaluation method took place for 6 months with residents in the medical emergency internship. At the end of the internship, the CCC created a report for each resident with the result of the evaluation. Subsequently, a questionnaire was applied regarding the perception of residents and evaluators about the changes made during the project, and their data were analyzed. Results: The confidence levels achieved by residents in the CCC were compatible with expected first-year resident knowledge. Regarding the evaluations obtained, there was a reduction over time, which can be improved with resident involvement as an active part of the assessment and also by asking the supervisors fulfill them. In the feedback tool, the most frequent words were “effective communication”, “disease scripts”, “clinical reasoning” and “differential diagnoses”. The perception questionnaire analysis shows that supervisors and residents have a preference for EPA based assessment, considering it as a good form of performance assessment, easy to understand, and useful for learning and feedback. Conclusion: The implementation of an EPA based assessment improves the quality of assessments and results in more assertive feedback. Nevertheless, it can face resistance from the evaluator’s teams and also from the residents. In order to avoid it, one should invest in continuous training sessions. The simplification of the process can be obtained by using online forms with immediate feedback. Other programs are expected to analyze this experience and use it to disseminate EPA-based assessment that is believed to be beneficial to the resident's teaching-learning process.Introdução: a avaliação baseada em Atividades Profissionais Confiáveis (APCs) consiste na atribuição de confiança ao aprendiz para a execução de tarefas que representam a prática profissional, envolve o acompanhamento do aprendiz por um período contínuo, com análise de desempenho, através da observação direta, estímulo à autorreflexão e feedback oportuno. Esse conjunto de observações e análises subsidia a decisão final de um Comitê de Competência Clínica (CCC) que atribui um determinado nível de confiança. O presente trabalho se propôs a analisar o processo de aprimoramento do sistema de avaliação baseado em APC em Pediatria, tendo como base a iniciativa já existente no Estágio da Urgência. Métodos: nesse contexto, aperfeiçoou-se a APC já utilizada, padronizando-a e criou-se um CCC. Os avaliadores foram treinados para aplicação do novo método e os residentes foram apresentados a este. A aplicação do método avaliativo ocorreu durante seis meses com os residentes no estágio de Urgência. Ao término do estágio, o CCC criou um relatório para cada residente com o resultado da avaliação. Posteriormente, foi aplicado um questionário a respeito da percepção dos residentes e avaliadores sobre as mudanças realizadas durante o projeto e seus dados analisados. Resultados: os níveis de confiança alcançados pelos residentes no CCC foram compatíveis com o esperado para o residente do primeiro ano. Em relação às avaliações obtidas, houve redução em seu número, ao longo do tempo, o que pode ser melhorado com o envolvimento dos residentes como parte ativa da avaliação e como solicitadores de seu cumprimento. No instrumento de feedback, as palavras mais citadas foram “comunicação efetiva”, “scripts de doenças”, “raciocínio clínico” e “diagnósticos diferenciais”. A análise dos resultados do questionário de percepção mostrou aceitação dos avaliadores e dos residentes em relação à avaliação baseada em APCs, considerada como uma boa forma de avaliação do desempenho, de fácil compreensão e útil para o aprendizado e feedback. Conclusão: a implementação de um sistema de avaliação baseado em APCs melhora a qualidade das avaliações e resulta em feedbacks mais assertivos. Ela pode enfrentar resistência por parte da equipe de avaliadores e também dos residentes, para evitá-la deve-se investir em sessões de treinamento contínuo. A simplificação do processo pode ser obtida utilizando-se sistemas de acesso eletrônico, com fornecimento de feedback imediato. Espera-se que outros programas utilizem essa experiência para disseminar a avaliação baseada em APCs, que se acredita ser benéfica ao processo de ensino-aprendizagem do residente.Submitted by Gisele Rodrigues (gisele.rodrigues@unifenas.br) on 2023-05-26T13:14:00Z No. of bitstreams: 2 DISSERTACAO EPA HIJPII_CORRIGIDA_FINAL.pdf: 3867816 bytes, checksum: b980cbb688c0751698f077a10e5983bd (MD5) license_rdf: 0 bytes, checksum: d41d8cd98f00b204e9800998ecf8427e (MD5)Approved for entry into archive by Gisele Rodrigues (gisele.rodrigues@unifenas.br) on 2023-06-01T11:01:57Z (GMT) No. of bitstreams: 2 DISSERTACAO EPA HIJPII_CORRIGIDA_FINAL.pdf: 3867816 bytes, checksum: b980cbb688c0751698f077a10e5983bd (MD5) license_rdf: 0 bytes, checksum: d41d8cd98f00b204e9800998ecf8427e (MD5)Approved for entry into archive by Gisele Rodrigues (gisele.rodrigues@unifenas.br) on 2023-06-14T11:29:45Z (GMT) No. of bitstreams: 2 license_rdf: 0 bytes, checksum: d41d8cd98f00b204e9800998ecf8427e (MD5) DISSERTACAO EPA HIJPII_CORRIGIDA_FINAL.pdf: 3867816 bytes, checksum: b980cbb688c0751698f077a10e5983bd (MD5)Made available in DSpace on 2023-06-14T11:36:00Z (GMT). No. of bitstreams: 2 license_rdf: 0 bytes, checksum: d41d8cd98f00b204e9800998ecf8427e (MD5) DISSERTACAO EPA HIJPII_CORRIGIDA_FINAL.pdf: 3867816 bytes, checksum: b980cbb688c0751698f077a10e5983bd (MD5) Previous issue date: 2022-11-09application/pdfporUniversidade José do Rosário VellanoPrograma de Mestrado em Ensino em SaúdeUNIFENASBrasilPós-Graduaçãohttp://creativecommons.org/licenses/by-nc-nd/4.0/info:eu-repo/semantics/openAccessAvaliação educacionalEducação médicaPediatriaCIENCIAS DA SAUDE::MEDICINAAnálise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátricainfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesis-7785865496449744764500500600-7642911903105032531-969369452308786627reponame:Biblioteca Digital de Teses e Dissertações da UNIFENASinstname:Universidade José do Rosário Vellano (UNIFENAS)instacron:UNIFENASLICENSElicense.txtlicense.txttext/plain; charset=utf-81069http://tede2.unifenas.br:8080/tede/bitstream/jspui/311/1/license.txt6e984014f1596acd3e8bc52e814bb39cMD51CC-LICENSElicense_urllicense_urltext/plain; charset=utf-849http://tede2.unifenas.br:8080/tede/bitstream/jspui/311/2/license_url4afdbb8c545fd630ea7db775da747b2fMD52license_textlicense_texttext/html; charset=utf-80http://tede2.unifenas.br:8080/tede/bitstream/jspui/311/3/license_textd41d8cd98f00b204e9800998ecf8427eMD53license_rdflicense_rdfapplication/rdf+xml; charset=utf-80http://tede2.unifenas.br:8080/tede/bitstream/jspui/311/4/license_rdfd41d8cd98f00b204e9800998ecf8427eMD54ORIGINALDISSERTACAO EPA HIJPII_CORRIGIDA_FINAL.pdfDISSERTACAO EPA HIJPII_CORRIGIDA_FINAL.pdfapplication/pdf3867816http://tede2.unifenas.br:8080/tede/bitstream/jspui/311/5/DISSERTACAO+EPA+HIJPII_CORRIGIDA_FINAL.pdfb980cbb688c0751698f077a10e5983bdMD55jspui/3112023-06-14 08:36:00.076oai:tede2.unifenas.br:jspui/311TGljZW7Dp2EgZGUgZGlzdHJpYnVpw6fDo28gbsOjbyBleGNsdXNpdmEuDQoNCkNvbSBhIGFwcmVzZW50YcOnw6NvIGRlc3RhIGxpY2Vuw6dhIGV1LCBBbmEgQmVhdHJpeiBDYXJ2YWxobyBUZXJyYSBjb25jZWRvIMOgIFVuaXZlcnNpZGFkZSBKb3PDqSBkbyBSb3PDoXJpbyBWZWxsYW5vIC0gVU5JRkVOQVMgbyBkaXJlaXRvIG7Do28tZXhjbHVzaXZvIGRlIHJlcHJvZHV6aXIsIHRyYWR1emlyIGUvb3UgZGlzdHJpYnVpciBhIHRlc2UgKGluY2x1aW5kbyBvIHJlc3VtbykgcG9yIHRvZG8gbyBtdW5kbyBubyBmb3JtYXRvIGltcHJlc3NvIGUgZWxldHLDtG5pY28gZSBlbSBxdWFscXVlciBtZWlvLCBpbmNsdWluZG8gb3MgZm9ybWF0b3Mgw6F1ZGlvIG91IHbDrWRlby4NCg0KQ29uY29yZG8gcXVlIGEgVU5JRkVOQVMgcG9kZSwgc2VtIGFsdGVyYXIgbyBjb250ZcO6ZG8sIHRyYW5zcG9yIGEgbWluaGEgdGVzZSBwYXJhIHF1YWxxdWVyIG1laW8gb3UgZm9ybWF0byBwYXJhIGZpbnMgZGUgcHJlc2VydmHDp8Ojby4NCg0KQ29uY29yZG8gcXVlIGEgVU5JRkVOQVMgcG9kZSBtYW50ZXIgbWFpcyBkZSB1bWEgY8OzcGlhIGRhIHRlc2UgcGFyYSBmaW5zIGRlIHNlZ3VyYW7Dp2EsIGJhY2stdXAgZSBwcmVzZXJ2YcOnw6NvLg0KRGVjbGFybyBxdWUgYSBtaW5oYSB0ZXNlIMOpIG9yaWdpbmFsIGUgY29uY2VkbyBvcyBkaXJlaXRvcyBjb250aWRvcyBuZXN0YSBsaWNlbsOnYS4gRSB0YW1iw6ltIGRlY2xhcm8gcXVlIG8gZGVww7NzaXRvIGRhIG1pbmhhIHRlc2UgbsOjbyBpbmZyaW5nZSBkaXJlaXRvcyBhdXRvcmFpcyBkZSBuaW5ndcOpbS4NCg0KQSBVTklGRU5BUyBzZSBjb21wcm9tZXRlIGEgaWRlbnRpZmljYXIgY2xhcmFtZW50ZSBxdWUgQW5hIEJlYXRyaXogQ2FydmFsaG8gVGVycmEgLCDDqSBkZW50ZW50b3IoYSkgZG9zIGRpcmVpdG9zIGF1dG9yYWlzIGRhIHRlc2UsIGUgbsOjbyBmYXLDoSBxdWFscXVlciBhbHRlcmHDp8OjbywgYWzDqW0gZGFxdWVsYXMgY29uY2VkaWRhcyBwb3IgZXN0YSBsaWNlbsOnYS4NCkFncmFkZcOnbyDDoCBDQVBFUyBwZWxvIGFwb2lvIGZpbmFuY2Vpcm8hDQoNCg==Biblioteca Digital de Teses e Dissertaçõeshttp://tede2.unifenas.br:8080/jspui/http://tede2.unifenas.br:8080/oai/requestbiblioteca@unifenas.br||biblioteca@unifenas.bropendoar:2023-06-14T11:36Biblioteca Digital de Teses e Dissertações da UNIFENAS - Universidade José do Rosário Vellano (UNIFENAS)false
dc.title.por.fl_str_mv Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica
title Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica
spellingShingle Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica
Ferreira, Maíra Lucília Monteiro
Avaliação educacional
Educação médica
Pediatria
CIENCIAS DA SAUDE::MEDICINA
title_short Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica
title_full Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica
title_fullStr Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica
title_full_unstemmed Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica
title_sort Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica
author Ferreira, Maíra Lucília Monteiro
author_facet Ferreira, Maíra Lucília Monteiro
author_role author
dc.contributor.advisor1.fl_str_mv Moura, Alexandre Sampaio
dc.contributor.advisor-co1.fl_str_mv Candini, Talitah Michel Sanchez
dc.contributor.referee1.fl_str_mv Toledo Júnior, Antônio Carlos de Castro
dc.contributor.referee2.fl_str_mv Penido, Maria Goretti Moreira Guimarães
dc.contributor.author.fl_str_mv Ferreira, Maíra Lucília Monteiro
contributor_str_mv Moura, Alexandre Sampaio
Candini, Talitah Michel Sanchez
Toledo Júnior, Antônio Carlos de Castro
Penido, Maria Goretti Moreira Guimarães
dc.subject.por.fl_str_mv Avaliação educacional
Educação médica
Pediatria
topic Avaliação educacional
Educação médica
Pediatria
CIENCIAS DA SAUDE::MEDICINA
dc.subject.cnpq.fl_str_mv CIENCIAS DA SAUDE::MEDICINA
description Introduction: Assessment based on Entrustable Professional Activities (EPAs) consists of attributing confidence to the learner to perform tasks that represent professional practice, and involves monitoring the learner for a continuous period, with performance analysis, through direct observation, encouragement of self-reflection, and prompt feedback. This set of observations and analysis subsidizes a Clinical Competence Committee (CCC) final decision that assigns a certain level of confidence. The aim of the present study is to analyze the process of improvement of the evaluation system based on EPA in Pediatrics, based on the existing initiative in the medical emergency internship. Methods: In this context, the EPA already used was improved, and standardized, and a CCC was created. The evaluators were trained to apply the new method and the residents were introduced to it. The application of the evaluation method took place for 6 months with residents in the medical emergency internship. At the end of the internship, the CCC created a report for each resident with the result of the evaluation. Subsequently, a questionnaire was applied regarding the perception of residents and evaluators about the changes made during the project, and their data were analyzed. Results: The confidence levels achieved by residents in the CCC were compatible with expected first-year resident knowledge. Regarding the evaluations obtained, there was a reduction over time, which can be improved with resident involvement as an active part of the assessment and also by asking the supervisors fulfill them. In the feedback tool, the most frequent words were “effective communication”, “disease scripts”, “clinical reasoning” and “differential diagnoses”. The perception questionnaire analysis shows that supervisors and residents have a preference for EPA based assessment, considering it as a good form of performance assessment, easy to understand, and useful for learning and feedback. Conclusion: The implementation of an EPA based assessment improves the quality of assessments and results in more assertive feedback. Nevertheless, it can face resistance from the evaluator’s teams and also from the residents. In order to avoid it, one should invest in continuous training sessions. The simplification of the process can be obtained by using online forms with immediate feedback. Other programs are expected to analyze this experience and use it to disseminate EPA-based assessment that is believed to be beneficial to the resident's teaching-learning process.
publishDate 2022
dc.date.issued.fl_str_mv 2022-11-09
dc.date.accessioned.fl_str_mv 2023-06-14T11:36:00Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.citation.fl_str_mv FERREIRA, Maíra Lucília Monteiro. Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica. 2022. 96.f Dissertação( Programa de Mestrado em Ensino em Saúde) - Universidade Professor Edson Antônio Velano, Belo Horizonte .
dc.identifier.uri.fl_str_mv http://tede2.unifenas.br:8080/jspui/handle/jspui/311
identifier_str_mv FERREIRA, Maíra Lucília Monteiro. Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica. 2022. 96.f Dissertação( Programa de Mestrado em Ensino em Saúde) - Universidade Professor Edson Antônio Velano, Belo Horizonte .
url http://tede2.unifenas.br:8080/jspui/handle/jspui/311
dc.language.iso.fl_str_mv por
language por
dc.relation.program.fl_str_mv -7785865496449744764
dc.relation.confidence.fl_str_mv 500
500
600
dc.relation.department.fl_str_mv -7642911903105032531
dc.relation.cnpq.fl_str_mv -969369452308786627
dc.rights.driver.fl_str_mv http://creativecommons.org/licenses/by-nc-nd/4.0/
info:eu-repo/semantics/openAccess
rights_invalid_str_mv http://creativecommons.org/licenses/by-nc-nd/4.0/
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Universidade José do Rosário Vellano
dc.publisher.program.fl_str_mv Programa de Mestrado em Ensino em Saúde
dc.publisher.initials.fl_str_mv UNIFENAS
dc.publisher.country.fl_str_mv Brasil
dc.publisher.department.fl_str_mv Pós-Graduação
publisher.none.fl_str_mv Universidade José do Rosário Vellano
dc.source.none.fl_str_mv reponame:Biblioteca Digital de Teses e Dissertações da UNIFENAS
instname:Universidade José do Rosário Vellano (UNIFENAS)
instacron:UNIFENAS
instname_str Universidade José do Rosário Vellano (UNIFENAS)
instacron_str UNIFENAS
institution UNIFENAS
reponame_str Biblioteca Digital de Teses e Dissertações da UNIFENAS
collection Biblioteca Digital de Teses e Dissertações da UNIFENAS
bitstream.url.fl_str_mv http://tede2.unifenas.br:8080/tede/bitstream/jspui/311/1/license.txt
http://tede2.unifenas.br:8080/tede/bitstream/jspui/311/2/license_url
http://tede2.unifenas.br:8080/tede/bitstream/jspui/311/3/license_text
http://tede2.unifenas.br:8080/tede/bitstream/jspui/311/4/license_rdf
http://tede2.unifenas.br:8080/tede/bitstream/jspui/311/5/DISSERTACAO+EPA+HIJPII_CORRIGIDA_FINAL.pdf
bitstream.checksum.fl_str_mv 6e984014f1596acd3e8bc52e814bb39c
4afdbb8c545fd630ea7db775da747b2f
d41d8cd98f00b204e9800998ecf8427e
d41d8cd98f00b204e9800998ecf8427e
b980cbb688c0751698f077a10e5983bd
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
MD5
MD5
repository.name.fl_str_mv Biblioteca Digital de Teses e Dissertações da UNIFENAS - Universidade José do Rosário Vellano (UNIFENAS)
repository.mail.fl_str_mv biblioteca@unifenas.br||biblioteca@unifenas.br
_version_ 1800394217189539840