Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica
Autor(a) principal: | |
---|---|
Data de Publicação: | 2022 |
Tipo de documento: | Dissertação |
Idioma: | por |
Título da fonte: | Biblioteca Digital de Teses e Dissertações da UNIFENAS |
Texto Completo: | http://tede2.unifenas.br:8080/jspui/handle/jspui/311 |
Resumo: | Introduction: Assessment based on Entrustable Professional Activities (EPAs) consists of attributing confidence to the learner to perform tasks that represent professional practice, and involves monitoring the learner for a continuous period, with performance analysis, through direct observation, encouragement of self-reflection, and prompt feedback. This set of observations and analysis subsidizes a Clinical Competence Committee (CCC) final decision that assigns a certain level of confidence. The aim of the present study is to analyze the process of improvement of the evaluation system based on EPA in Pediatrics, based on the existing initiative in the medical emergency internship. Methods: In this context, the EPA already used was improved, and standardized, and a CCC was created. The evaluators were trained to apply the new method and the residents were introduced to it. The application of the evaluation method took place for 6 months with residents in the medical emergency internship. At the end of the internship, the CCC created a report for each resident with the result of the evaluation. Subsequently, a questionnaire was applied regarding the perception of residents and evaluators about the changes made during the project, and their data were analyzed. Results: The confidence levels achieved by residents in the CCC were compatible with expected first-year resident knowledge. Regarding the evaluations obtained, there was a reduction over time, which can be improved with resident involvement as an active part of the assessment and also by asking the supervisors fulfill them. In the feedback tool, the most frequent words were “effective communication”, “disease scripts”, “clinical reasoning” and “differential diagnoses”. The perception questionnaire analysis shows that supervisors and residents have a preference for EPA based assessment, considering it as a good form of performance assessment, easy to understand, and useful for learning and feedback. Conclusion: The implementation of an EPA based assessment improves the quality of assessments and results in more assertive feedback. Nevertheless, it can face resistance from the evaluator’s teams and also from the residents. In order to avoid it, one should invest in continuous training sessions. The simplification of the process can be obtained by using online forms with immediate feedback. Other programs are expected to analyze this experience and use it to disseminate EPA-based assessment that is believed to be beneficial to the resident's teaching-learning process. |
id |
UNFE_5f97a3afb85a1a72c3104314ef9e089b |
---|---|
oai_identifier_str |
oai:tede2.unifenas.br:jspui/311 |
network_acronym_str |
UNFE |
network_name_str |
Biblioteca Digital de Teses e Dissertações da UNIFENAS |
repository_id_str |
|
spelling |
Moura, Alexandre SampaioCandini, Talitah Michel SanchezToledo Júnior, Antônio Carlos de CastroPenido, Maria Goretti Moreira GuimarãesFerreira, Maíra Lucília Monteiro2023-06-14T11:36:00Z2022-11-09FERREIRA, Maíra Lucília Monteiro. Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica. 2022. 96.f Dissertação( Programa de Mestrado em Ensino em Saúde) - Universidade Professor Edson Antônio Velano, Belo Horizonte .http://tede2.unifenas.br:8080/jspui/handle/jspui/311Introduction: Assessment based on Entrustable Professional Activities (EPAs) consists of attributing confidence to the learner to perform tasks that represent professional practice, and involves monitoring the learner for a continuous period, with performance analysis, through direct observation, encouragement of self-reflection, and prompt feedback. This set of observations and analysis subsidizes a Clinical Competence Committee (CCC) final decision that assigns a certain level of confidence. The aim of the present study is to analyze the process of improvement of the evaluation system based on EPA in Pediatrics, based on the existing initiative in the medical emergency internship. Methods: In this context, the EPA already used was improved, and standardized, and a CCC was created. The evaluators were trained to apply the new method and the residents were introduced to it. The application of the evaluation method took place for 6 months with residents in the medical emergency internship. At the end of the internship, the CCC created a report for each resident with the result of the evaluation. Subsequently, a questionnaire was applied regarding the perception of residents and evaluators about the changes made during the project, and their data were analyzed. Results: The confidence levels achieved by residents in the CCC were compatible with expected first-year resident knowledge. Regarding the evaluations obtained, there was a reduction over time, which can be improved with resident involvement as an active part of the assessment and also by asking the supervisors fulfill them. In the feedback tool, the most frequent words were “effective communication”, “disease scripts”, “clinical reasoning” and “differential diagnoses”. The perception questionnaire analysis shows that supervisors and residents have a preference for EPA based assessment, considering it as a good form of performance assessment, easy to understand, and useful for learning and feedback. Conclusion: The implementation of an EPA based assessment improves the quality of assessments and results in more assertive feedback. Nevertheless, it can face resistance from the evaluator’s teams and also from the residents. In order to avoid it, one should invest in continuous training sessions. The simplification of the process can be obtained by using online forms with immediate feedback. Other programs are expected to analyze this experience and use it to disseminate EPA-based assessment that is believed to be beneficial to the resident's teaching-learning process.Introdução: a avaliação baseada em Atividades Profissionais Confiáveis (APCs) consiste na atribuição de confiança ao aprendiz para a execução de tarefas que representam a prática profissional, envolve o acompanhamento do aprendiz por um período contínuo, com análise de desempenho, através da observação direta, estímulo à autorreflexão e feedback oportuno. Esse conjunto de observações e análises subsidia a decisão final de um Comitê de Competência Clínica (CCC) que atribui um determinado nível de confiança. O presente trabalho se propôs a analisar o processo de aprimoramento do sistema de avaliação baseado em APC em Pediatria, tendo como base a iniciativa já existente no Estágio da Urgência. Métodos: nesse contexto, aperfeiçoou-se a APC já utilizada, padronizando-a e criou-se um CCC. Os avaliadores foram treinados para aplicação do novo método e os residentes foram apresentados a este. A aplicação do método avaliativo ocorreu durante seis meses com os residentes no estágio de Urgência. Ao término do estágio, o CCC criou um relatório para cada residente com o resultado da avaliação. Posteriormente, foi aplicado um questionário a respeito da percepção dos residentes e avaliadores sobre as mudanças realizadas durante o projeto e seus dados analisados. Resultados: os níveis de confiança alcançados pelos residentes no CCC foram compatíveis com o esperado para o residente do primeiro ano. Em relação às avaliações obtidas, houve redução em seu número, ao longo do tempo, o que pode ser melhorado com o envolvimento dos residentes como parte ativa da avaliação e como solicitadores de seu cumprimento. No instrumento de feedback, as palavras mais citadas foram “comunicação efetiva”, “scripts de doenças”, “raciocínio clínico” e “diagnósticos diferenciais”. A análise dos resultados do questionário de percepção mostrou aceitação dos avaliadores e dos residentes em relação à avaliação baseada em APCs, considerada como uma boa forma de avaliação do desempenho, de fácil compreensão e útil para o aprendizado e feedback. Conclusão: a implementação de um sistema de avaliação baseado em APCs melhora a qualidade das avaliações e resulta em feedbacks mais assertivos. Ela pode enfrentar resistência por parte da equipe de avaliadores e também dos residentes, para evitá-la deve-se investir em sessões de treinamento contínuo. A simplificação do processo pode ser obtida utilizando-se sistemas de acesso eletrônico, com fornecimento de feedback imediato. Espera-se que outros programas utilizem essa experiência para disseminar a avaliação baseada em APCs, que se acredita ser benéfica ao processo de ensino-aprendizagem do residente.Submitted by Gisele Rodrigues (gisele.rodrigues@unifenas.br) on 2023-05-26T13:14:00Z No. of bitstreams: 2 DISSERTACAO EPA HIJPII_CORRIGIDA_FINAL.pdf: 3867816 bytes, checksum: b980cbb688c0751698f077a10e5983bd (MD5) license_rdf: 0 bytes, checksum: d41d8cd98f00b204e9800998ecf8427e (MD5)Approved for entry into archive by Gisele Rodrigues (gisele.rodrigues@unifenas.br) on 2023-06-01T11:01:57Z (GMT) No. of bitstreams: 2 DISSERTACAO EPA HIJPII_CORRIGIDA_FINAL.pdf: 3867816 bytes, checksum: b980cbb688c0751698f077a10e5983bd (MD5) license_rdf: 0 bytes, checksum: d41d8cd98f00b204e9800998ecf8427e (MD5)Approved for entry into archive by Gisele Rodrigues (gisele.rodrigues@unifenas.br) on 2023-06-14T11:29:45Z (GMT) No. of bitstreams: 2 license_rdf: 0 bytes, checksum: d41d8cd98f00b204e9800998ecf8427e (MD5) DISSERTACAO EPA HIJPII_CORRIGIDA_FINAL.pdf: 3867816 bytes, checksum: b980cbb688c0751698f077a10e5983bd (MD5)Made available in DSpace on 2023-06-14T11:36:00Z (GMT). No. of bitstreams: 2 license_rdf: 0 bytes, checksum: d41d8cd98f00b204e9800998ecf8427e (MD5) DISSERTACAO EPA HIJPII_CORRIGIDA_FINAL.pdf: 3867816 bytes, checksum: b980cbb688c0751698f077a10e5983bd (MD5) Previous issue date: 2022-11-09application/pdfporUniversidade José do Rosário VellanoPrograma de Mestrado em Ensino em SaúdeUNIFENASBrasilPós-Graduaçãohttp://creativecommons.org/licenses/by-nc-nd/4.0/info:eu-repo/semantics/openAccessAvaliação educacionalEducação médicaPediatriaCIENCIAS DA SAUDE::MEDICINAAnálise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátricainfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesis-7785865496449744764500500600-7642911903105032531-969369452308786627reponame:Biblioteca Digital de Teses e Dissertações da UNIFENASinstname:Universidade José do Rosário Vellano (UNIFENAS)instacron:UNIFENASLICENSElicense.txtlicense.txttext/plain; charset=utf-81069http://tede2.unifenas.br:8080/tede/bitstream/jspui/311/1/license.txt6e984014f1596acd3e8bc52e814bb39cMD51CC-LICENSElicense_urllicense_urltext/plain; charset=utf-849http://tede2.unifenas.br:8080/tede/bitstream/jspui/311/2/license_url4afdbb8c545fd630ea7db775da747b2fMD52license_textlicense_texttext/html; charset=utf-80http://tede2.unifenas.br:8080/tede/bitstream/jspui/311/3/license_textd41d8cd98f00b204e9800998ecf8427eMD53license_rdflicense_rdfapplication/rdf+xml; charset=utf-80http://tede2.unifenas.br:8080/tede/bitstream/jspui/311/4/license_rdfd41d8cd98f00b204e9800998ecf8427eMD54ORIGINALDISSERTACAO EPA HIJPII_CORRIGIDA_FINAL.pdfDISSERTACAO EPA HIJPII_CORRIGIDA_FINAL.pdfapplication/pdf3867816http://tede2.unifenas.br:8080/tede/bitstream/jspui/311/5/DISSERTACAO+EPA+HIJPII_CORRIGIDA_FINAL.pdfb980cbb688c0751698f077a10e5983bdMD55jspui/3112023-06-14 08:36:00.076oai:tede2.unifenas.br:jspui/311TGljZW7Dp2EgZGUgZGlzdHJpYnVpw6fDo28gbsOjbyBleGNsdXNpdmEuDQoNCkNvbSBhIGFwcmVzZW50YcOnw6NvIGRlc3RhIGxpY2Vuw6dhIGV1LCBBbmEgQmVhdHJpeiBDYXJ2YWxobyBUZXJyYSBjb25jZWRvIMOgIFVuaXZlcnNpZGFkZSBKb3PDqSBkbyBSb3PDoXJpbyBWZWxsYW5vIC0gVU5JRkVOQVMgbyBkaXJlaXRvIG7Do28tZXhjbHVzaXZvIGRlIHJlcHJvZHV6aXIsIHRyYWR1emlyIGUvb3UgZGlzdHJpYnVpciBhIHRlc2UgKGluY2x1aW5kbyBvIHJlc3VtbykgcG9yIHRvZG8gbyBtdW5kbyBubyBmb3JtYXRvIGltcHJlc3NvIGUgZWxldHLDtG5pY28gZSBlbSBxdWFscXVlciBtZWlvLCBpbmNsdWluZG8gb3MgZm9ybWF0b3Mgw6F1ZGlvIG91IHbDrWRlby4NCg0KQ29uY29yZG8gcXVlIGEgVU5JRkVOQVMgcG9kZSwgc2VtIGFsdGVyYXIgbyBjb250ZcO6ZG8sIHRyYW5zcG9yIGEgbWluaGEgdGVzZSBwYXJhIHF1YWxxdWVyIG1laW8gb3UgZm9ybWF0byBwYXJhIGZpbnMgZGUgcHJlc2VydmHDp8Ojby4NCg0KQ29uY29yZG8gcXVlIGEgVU5JRkVOQVMgcG9kZSBtYW50ZXIgbWFpcyBkZSB1bWEgY8OzcGlhIGRhIHRlc2UgcGFyYSBmaW5zIGRlIHNlZ3VyYW7Dp2EsIGJhY2stdXAgZSBwcmVzZXJ2YcOnw6NvLg0KRGVjbGFybyBxdWUgYSBtaW5oYSB0ZXNlIMOpIG9yaWdpbmFsIGUgY29uY2VkbyBvcyBkaXJlaXRvcyBjb250aWRvcyBuZXN0YSBsaWNlbsOnYS4gRSB0YW1iw6ltIGRlY2xhcm8gcXVlIG8gZGVww7NzaXRvIGRhIG1pbmhhIHRlc2UgbsOjbyBpbmZyaW5nZSBkaXJlaXRvcyBhdXRvcmFpcyBkZSBuaW5ndcOpbS4NCg0KQSBVTklGRU5BUyBzZSBjb21wcm9tZXRlIGEgaWRlbnRpZmljYXIgY2xhcmFtZW50ZSBxdWUgQW5hIEJlYXRyaXogQ2FydmFsaG8gVGVycmEgLCDDqSBkZW50ZW50b3IoYSkgZG9zIGRpcmVpdG9zIGF1dG9yYWlzIGRhIHRlc2UsIGUgbsOjbyBmYXLDoSBxdWFscXVlciBhbHRlcmHDp8OjbywgYWzDqW0gZGFxdWVsYXMgY29uY2VkaWRhcyBwb3IgZXN0YSBsaWNlbsOnYS4NCkFncmFkZcOnbyDDoCBDQVBFUyBwZWxvIGFwb2lvIGZpbmFuY2Vpcm8hDQoNCg==Biblioteca Digital de Teses e Dissertaçõeshttp://tede2.unifenas.br:8080/jspui/http://tede2.unifenas.br:8080/oai/requestbiblioteca@unifenas.br||biblioteca@unifenas.bropendoar:2023-06-14T11:36Biblioteca Digital de Teses e Dissertações da UNIFENAS - Universidade José do Rosário Vellano (UNIFENAS)false |
dc.title.por.fl_str_mv |
Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica |
title |
Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica |
spellingShingle |
Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica Ferreira, Maíra Lucília Monteiro Avaliação educacional Educação médica Pediatria CIENCIAS DA SAUDE::MEDICINA |
title_short |
Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica |
title_full |
Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica |
title_fullStr |
Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica |
title_full_unstemmed |
Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica |
title_sort |
Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica |
author |
Ferreira, Maíra Lucília Monteiro |
author_facet |
Ferreira, Maíra Lucília Monteiro |
author_role |
author |
dc.contributor.advisor1.fl_str_mv |
Moura, Alexandre Sampaio |
dc.contributor.advisor-co1.fl_str_mv |
Candini, Talitah Michel Sanchez |
dc.contributor.referee1.fl_str_mv |
Toledo Júnior, Antônio Carlos de Castro |
dc.contributor.referee2.fl_str_mv |
Penido, Maria Goretti Moreira Guimarães |
dc.contributor.author.fl_str_mv |
Ferreira, Maíra Lucília Monteiro |
contributor_str_mv |
Moura, Alexandre Sampaio Candini, Talitah Michel Sanchez Toledo Júnior, Antônio Carlos de Castro Penido, Maria Goretti Moreira Guimarães |
dc.subject.por.fl_str_mv |
Avaliação educacional Educação médica Pediatria |
topic |
Avaliação educacional Educação médica Pediatria CIENCIAS DA SAUDE::MEDICINA |
dc.subject.cnpq.fl_str_mv |
CIENCIAS DA SAUDE::MEDICINA |
description |
Introduction: Assessment based on Entrustable Professional Activities (EPAs) consists of attributing confidence to the learner to perform tasks that represent professional practice, and involves monitoring the learner for a continuous period, with performance analysis, through direct observation, encouragement of self-reflection, and prompt feedback. This set of observations and analysis subsidizes a Clinical Competence Committee (CCC) final decision that assigns a certain level of confidence. The aim of the present study is to analyze the process of improvement of the evaluation system based on EPA in Pediatrics, based on the existing initiative in the medical emergency internship. Methods: In this context, the EPA already used was improved, and standardized, and a CCC was created. The evaluators were trained to apply the new method and the residents were introduced to it. The application of the evaluation method took place for 6 months with residents in the medical emergency internship. At the end of the internship, the CCC created a report for each resident with the result of the evaluation. Subsequently, a questionnaire was applied regarding the perception of residents and evaluators about the changes made during the project, and their data were analyzed. Results: The confidence levels achieved by residents in the CCC were compatible with expected first-year resident knowledge. Regarding the evaluations obtained, there was a reduction over time, which can be improved with resident involvement as an active part of the assessment and also by asking the supervisors fulfill them. In the feedback tool, the most frequent words were “effective communication”, “disease scripts”, “clinical reasoning” and “differential diagnoses”. The perception questionnaire analysis shows that supervisors and residents have a preference for EPA based assessment, considering it as a good form of performance assessment, easy to understand, and useful for learning and feedback. Conclusion: The implementation of an EPA based assessment improves the quality of assessments and results in more assertive feedback. Nevertheless, it can face resistance from the evaluator’s teams and also from the residents. In order to avoid it, one should invest in continuous training sessions. The simplification of the process can be obtained by using online forms with immediate feedback. Other programs are expected to analyze this experience and use it to disseminate EPA-based assessment that is believed to be beneficial to the resident's teaching-learning process. |
publishDate |
2022 |
dc.date.issued.fl_str_mv |
2022-11-09 |
dc.date.accessioned.fl_str_mv |
2023-06-14T11:36:00Z |
dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
dc.type.driver.fl_str_mv |
info:eu-repo/semantics/masterThesis |
format |
masterThesis |
status_str |
publishedVersion |
dc.identifier.citation.fl_str_mv |
FERREIRA, Maíra Lucília Monteiro. Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica. 2022. 96.f Dissertação( Programa de Mestrado em Ensino em Saúde) - Universidade Professor Edson Antônio Velano, Belo Horizonte . |
dc.identifier.uri.fl_str_mv |
http://tede2.unifenas.br:8080/jspui/handle/jspui/311 |
identifier_str_mv |
FERREIRA, Maíra Lucília Monteiro. Análise da implementação de um sistema de avaliação baseado em atividades profissionais confiáveis em uma residência pediátrica. 2022. 96.f Dissertação( Programa de Mestrado em Ensino em Saúde) - Universidade Professor Edson Antônio Velano, Belo Horizonte . |
url |
http://tede2.unifenas.br:8080/jspui/handle/jspui/311 |
dc.language.iso.fl_str_mv |
por |
language |
por |
dc.relation.program.fl_str_mv |
-7785865496449744764 |
dc.relation.confidence.fl_str_mv |
500 500 600 |
dc.relation.department.fl_str_mv |
-7642911903105032531 |
dc.relation.cnpq.fl_str_mv |
-969369452308786627 |
dc.rights.driver.fl_str_mv |
http://creativecommons.org/licenses/by-nc-nd/4.0/ info:eu-repo/semantics/openAccess |
rights_invalid_str_mv |
http://creativecommons.org/licenses/by-nc-nd/4.0/ |
eu_rights_str_mv |
openAccess |
dc.format.none.fl_str_mv |
application/pdf |
dc.publisher.none.fl_str_mv |
Universidade José do Rosário Vellano |
dc.publisher.program.fl_str_mv |
Programa de Mestrado em Ensino em Saúde |
dc.publisher.initials.fl_str_mv |
UNIFENAS |
dc.publisher.country.fl_str_mv |
Brasil |
dc.publisher.department.fl_str_mv |
Pós-Graduação |
publisher.none.fl_str_mv |
Universidade José do Rosário Vellano |
dc.source.none.fl_str_mv |
reponame:Biblioteca Digital de Teses e Dissertações da UNIFENAS instname:Universidade José do Rosário Vellano (UNIFENAS) instacron:UNIFENAS |
instname_str |
Universidade José do Rosário Vellano (UNIFENAS) |
instacron_str |
UNIFENAS |
institution |
UNIFENAS |
reponame_str |
Biblioteca Digital de Teses e Dissertações da UNIFENAS |
collection |
Biblioteca Digital de Teses e Dissertações da UNIFENAS |
bitstream.url.fl_str_mv |
http://tede2.unifenas.br:8080/tede/bitstream/jspui/311/1/license.txt http://tede2.unifenas.br:8080/tede/bitstream/jspui/311/2/license_url http://tede2.unifenas.br:8080/tede/bitstream/jspui/311/3/license_text http://tede2.unifenas.br:8080/tede/bitstream/jspui/311/4/license_rdf http://tede2.unifenas.br:8080/tede/bitstream/jspui/311/5/DISSERTACAO+EPA+HIJPII_CORRIGIDA_FINAL.pdf |
bitstream.checksum.fl_str_mv |
6e984014f1596acd3e8bc52e814bb39c 4afdbb8c545fd630ea7db775da747b2f d41d8cd98f00b204e9800998ecf8427e d41d8cd98f00b204e9800998ecf8427e b980cbb688c0751698f077a10e5983bd |
bitstream.checksumAlgorithm.fl_str_mv |
MD5 MD5 MD5 MD5 MD5 |
repository.name.fl_str_mv |
Biblioteca Digital de Teses e Dissertações da UNIFENAS - Universidade José do Rosário Vellano (UNIFENAS) |
repository.mail.fl_str_mv |
biblioteca@unifenas.br||biblioteca@unifenas.br |
_version_ |
1800394217189539840 |