Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019

Detalhes bibliográficos
Autor(a) principal: Garcia, Layara Maria
Data de Publicação: 2019
Tipo de documento: Dissertação
Idioma: por
Título da fonte: Biblioteca Digital de Teses e Dissertações da UNIFENAS
Texto Completo: http://tede2.unifenas.br:8080/jspui/handle/jspui/294
Resumo: The use of clinical skills training through simulation into medical school curricula has been a major innovation for education, enabling students to train ethically in a safe environment without risk to patients. The best way to evaluate skills in a simulated environment is not well defined. Few studies have compared teachers and rating scales reliability. Objective: To describe how different clinical skill assessment scales in simulation laboratory and different teachers profiles interfere with assessment reliability. Methodology: 28 students from the third year and 20 students from the sixth year of UNIFENAS-BH Medical School were recruited. Students performed a practical skills test on newborn anthropometry in the simulation laboratory, where they were filmed for further performance assessment using three scales: Training Level Rating Scale (TL), Global Rating Scale (EG); and checklist (CL). Nine evaluators were selected divided into three profiles: three pediatricians with no experience in teaching skills, three pediatricians with experience in teaching skills, and three skill teachers who were not pediatricians. One teacher from each profile used only one of the three proposed scales, so that the three scales were used in each of the three profiles. The total score for each of the scales was calculated, with a possible total of 9 points. Results: when comparing the different scales, regardless of the teacher profile, it was observed only that the isolated grade of the CL was able to discriminate the third and sixth year students. Multivariate analysis showed that TL, isolated score (p = 0.346) or total score (p = 0.407), was the only scale that was not influenced by the teacher profile. The reliability analysis performed according isolated scales score showed that only the TL has good reliability. The addition of anthropometric measurements increased the reliability of scales and teachers. Conclusion: there is a difference in reliability between the scales. TL plus anthropometric measurements was the most reliable. The teacher profile directly affected the reliability of the scales, but the expert teachers showed acceptable reliability when anthropometric measurements were added to the scales. Only TL was able to correctly discriminate the two groups and was not influenced by teacher profile
id UNFE_5502b3ac337fab6c885a0c2ece33742b
oai_identifier_str oai:tede2.unifenas.br:jspui/294
network_acronym_str UNFE
network_name_str Biblioteca Digital de Teses e Dissertações da UNIFENAS
repository_id_str
spelling Toledo Jr, Antônio Carlos de Castro62765167672http://lattes.cnpq.br/2192040830710780Barra, Juliana Silva90152905634http://lattes.cnpq.br/8251086417913278Turci, Maria Aparecida81781407649http://lattes.cnpq.br/050787167107866108084923650http://lattes.cnpq.br/6798767394178271Garcia, Layara Maria2021-08-16T12:24:31Z2019-12-06Garcia, Layara Maria. Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019. 2019. 55f. Dissertação (Programa de Mestrado em Ensino em Saúde) - Universidade José do Rosário Vellano, Belo Horizonte, 2019.http://tede2.unifenas.br:8080/jspui/handle/jspui/294The use of clinical skills training through simulation into medical school curricula has been a major innovation for education, enabling students to train ethically in a safe environment without risk to patients. The best way to evaluate skills in a simulated environment is not well defined. Few studies have compared teachers and rating scales reliability. Objective: To describe how different clinical skill assessment scales in simulation laboratory and different teachers profiles interfere with assessment reliability. Methodology: 28 students from the third year and 20 students from the sixth year of UNIFENAS-BH Medical School were recruited. Students performed a practical skills test on newborn anthropometry in the simulation laboratory, where they were filmed for further performance assessment using three scales: Training Level Rating Scale (TL), Global Rating Scale (EG); and checklist (CL). Nine evaluators were selected divided into three profiles: three pediatricians with no experience in teaching skills, three pediatricians with experience in teaching skills, and three skill teachers who were not pediatricians. One teacher from each profile used only one of the three proposed scales, so that the three scales were used in each of the three profiles. The total score for each of the scales was calculated, with a possible total of 9 points. Results: when comparing the different scales, regardless of the teacher profile, it was observed only that the isolated grade of the CL was able to discriminate the third and sixth year students. Multivariate analysis showed that TL, isolated score (p = 0.346) or total score (p = 0.407), was the only scale that was not influenced by the teacher profile. The reliability analysis performed according isolated scales score showed that only the TL has good reliability. The addition of anthropometric measurements increased the reliability of scales and teachers. Conclusion: there is a difference in reliability between the scales. TL plus anthropometric measurements was the most reliable. The teacher profile directly affected the reliability of the scales, but the expert teachers showed acceptable reliability when anthropometric measurements were added to the scales. Only TL was able to correctly discriminate the two groups and was not influenced by teacher profileA incorporação do treinamento de habilidades clínicas através da simulação nos currículos das escolas médicas foi uma inovação importante para educação, permitindo que os estudantes se capacitem de forma ética em ambiente seguro e sem oferecer riscos aos pacientes. A melhor forma de avaliar habilidades em ambiente simulado não está totalmente definida. Poucos estudos compararam escalas de avaliação e avaliadores em relação a sua confiabilidade. Objetivo: descrever como diferentes escalas de avaliação de habilidades clínicas em laboratório de simulação e diferentes perfis de avaliadores interferem na confiabilidade da avaliação. Metodologia: foram recrutados 28 alunos do terceiro e 20 alunos do sexto anos do curso de medicina da UNIFENAS-BH. Os estudantes realizaram uma prova prática de habilidades sobrea antropometria do recém-nascido no laboratório de habilidades, onde foram filmados para posterior avaliação do desempenho através de três escalas: escala de avaliação do nível de treinamento (NT), escala de classificação global (EG) e lista de verificação ou checklist (CL). Foram selecionados nove avaliadores divididos em três perfis: três pediatras sem experiência em ensino de habilidades, três pediatras com experiência em ensino de habilidade e três professores de habilidades que não eram pediatras. Um avaliador de cada perfil utilizou apenas uma das três escalas propostas, de forma que as três escalas foram utilizadas em cada um dos três perfis de avaliadores. Foi calculado o escore total para cada uma das escalas, num total possível de 9 pontos. Resultados: ao comparar as diferentes escalas, independentemente do perfil do avaliador, observou-se apenas que a nota isolada do CL foi capaz de discriminar os alunos do terceiro e do sexto anos. A análise multivariada mostrou que a NT, isolada (p=0,346) ou total (p=0,407), foi à única escala que não foi influenciada pelo perfil do avaliador. A análise de confiabilidade realizada de acordo com as escalas isoladas demonstrou que apenas a NT apresenta boa confiabilidade. O acréscimo da nota das medidas antropométricas aumentou a confiabilidade entre as escalas e avaliadores. Conclusão: existe diferença na confiabilidade entre as escalas. A NT acrescida de dados antropométricos foi a de maior confiabilidade. O perfil do avaliador interferiu diretamente na confiabilidade das escalas, porém os avaliadores especialistas apresentaram confiabilidade aceitável quando a escala foi somada aos dados objetivos. Apenas a NT foi capaz de discriminar corretamente os dois grupos e não foi influenciada pelo perfil do avaliadorSubmitted by Kely Alves (kely.alves@unifenas.br) on 2021-01-11T17:41:43Z No. of bitstreams: 1 Dissertação Layara.pdf: 949828 bytes, checksum: 7dfb4c18f7fcfe65fb5c53b79d8bbb1e (MD5)Approved for entry into archive by Samira Ramos (samira.ramos@unifenas.br) on 2021-08-16T12:22:05Z (GMT) No. of bitstreams: 1 Dissertação Layara.pdf: 949828 bytes, checksum: 7dfb4c18f7fcfe65fb5c53b79d8bbb1e (MD5)Approved for entry into archive by Samira Ramos (samira.ramos@unifenas.br) on 2021-08-16T12:23:00Z (GMT) No. of bitstreams: 1 Dissertação Layara.pdf: 949828 bytes, checksum: 7dfb4c18f7fcfe65fb5c53b79d8bbb1e (MD5)Made available in DSpace on 2021-08-16T12:24:31Z (GMT). No. of bitstreams: 1 Dissertação Layara.pdf: 949828 bytes, checksum: 7dfb4c18f7fcfe65fb5c53b79d8bbb1e (MD5) Previous issue date: 2019-12-06application/pdfporUniversidade José do Rosário VellanoPrograma de Mestrado em Ensino em SaúdeUNIFENASBrasilPós-GraduaçãoAvaliação educacionalCompetência clínicaSimulaçãoTreinamento por simulaçãoEducational MeasurementClinical CompetenceSimulationSimulation TrainingCIENCIAS DA SAUDE::MEDICINAComparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019Comparison of reliability between three scales for assessing clinical skills in a simulation laboratory and three different types of evaluators. Unicentric experimental study, 2019info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesis-7785865496449744764500500600-7642911903105032531-969369452308786627info:eu-repo/semantics/openAccessreponame:Biblioteca Digital de Teses e Dissertações da UNIFENASinstname:Universidade José do Rosário Vellano (UNIFENAS)instacron:UNIFENASORIGINALDissertação Layara.pdfDissertação Layara.pdfapplication/pdf949828http://tede2.unifenas.br:8080/tede/bitstream/jspui/294/2/Disserta%C3%A7%C3%A3o+Layara.pdf7dfb4c18f7fcfe65fb5c53b79d8bbb1eMD52LICENSElicense.txtlicense.txttext/plain; charset=utf-81063http://tede2.unifenas.br:8080/tede/bitstream/jspui/294/1/license.txt81634d9675c089eff355707f92149b83MD51jspui/2942021-08-16 09:24:31.823oai:tede2.unifenas.br:jspui/294TGljZW7Dp2EgZGUgZGlzdHJpYnVpw6fDo28gbsOjbyBleGNsdXNpdmEuDQoNCkNvbSBhIGFwcmVzZW50YcOnw6NvIGRlc3RhIGxpY2Vuw6dhIGV1LCBMYXlhcmEgTWFyaWEgR2FyY2lhICwgY29uY2VkbyDDoCBVbml2ZXJzaWRhZGUgSm9zw6kgZG8gUm9zw6FyaW8gVmVsbGFubyAtIFVOSUZFTkFTIG8gZGlyZWl0byBuw6NvLWV4Y2x1c2l2byBkZSByZXByb2R1emlyLCAgdHJhZHV6aXIsIGUvb3UgZGlzdHJpYnVpciBhIGRpc3NlcnRhw6fDo28gKGluY2x1aW5kbyBvIHJlc3VtbykgcG9yIHRvZG8gbyBtdW5kbyBubyBmb3JtYXRvIGltcHJlc3NvIGUgZWxldHLDtG5pY28gZSBlbSBxdWFscXVlciBtZWlvLCBpbmNsdWluZG8gb3MgZm9ybWF0b3Mgw6F1ZGlvIG91IHbDrWRlby4NCg0KQ29uY29yZG8gcXVlIGEgVU5JRkVOQVMgcG9kZSwgc2VtIGFsdGVyYXIgbyBjb250ZcO6ZG8sIHRyYW5zcG9yIGEgc3VhIGRpc3NlcnRhw6fDo28gcGFyYSBxdWFscXVlciBtZWlvIG91IGZvcm1hdG8gcGFyYSBmaW5zIGRlIHByZXNlcnZhw6fDo28uDQoNCkNvbmNvcmRvIHF1ZSBhIFVOSUZFTkFTIHBvZGUgbWFudGVyIG1haXMgZGUgdW1hIGPDs3BpYSBhIHN1YSBkaXNzZXJ0YcOnw6NvIHBhcmEgZmlucyBkZSBzZWd1cmFuw6dhLCBiYWNrLXVwIGUgcHJlc2VydmHDp8Ojby4NCkRlY2xhcm8gcXVlIGEgbWluaGEgZGlzc2VydGHDp8OjbyDDqSBvcmlnaW5hbCBlIGNvbmNlZG8gb3MgZGlyZWl0b3MgY29udGlkb3MgbmVzdGEgbGljZW7Dp2EuIEUgdGFtYsOpbSBkZWNsYXJvIHF1ZSBvIGRlcMOzc2l0byBkYSBtaW5oYSB0ZXNlIG7Do28gaW5mcmluZ2UgZGlyZWl0b3MgYXV0b3JhaXMgZGUgbmluZ3XDqW0uDQoNCg0KQSBVTklGRU5BUyBzZSBjb21wcm9tZXRlIGEgaWRlbnRpZmljYXIgY2xhcmFtZW50ZSBxdWUgTGF5YXJhIE1hcmlhIEdhcmNpYSAgw6kgZGVudGVudG9yKGEpIGRvcyBkaXJlaXRvcyBhdXRvcmFpcyBkYSBkaXNzZXJ0YcOnw6NvLCBlIG7Do28gZmFyw6EgcXVhbHF1ZXIgYWx0ZXJhw6fDo28sIGFsw6ltIGRhcXVlbGFzIGNvbmNlZGlkYXMgcG9yIGVzdGEgbGljZW7Dp2EuDQoNCg==Biblioteca Digital de Teses e Dissertaçõeshttp://tede2.unifenas.br:8080/jspui/http://tede2.unifenas.br:8080/oai/requestbiblioteca@unifenas.br||biblioteca@unifenas.bropendoar:2021-08-16T12:24:31Biblioteca Digital de Teses e Dissertações da UNIFENAS - Universidade José do Rosário Vellano (UNIFENAS)false
dc.title.por.fl_str_mv Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019
dc.title.alternative.eng.fl_str_mv Comparison of reliability between three scales for assessing clinical skills in a simulation laboratory and three different types of evaluators. Unicentric experimental study, 2019
title Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019
spellingShingle Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019
Garcia, Layara Maria
Avaliação educacional
Competência clínica
Simulação
Treinamento por simulação
Educational Measurement
Clinical Competence
Simulation
Simulation Training
CIENCIAS DA SAUDE::MEDICINA
title_short Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019
title_full Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019
title_fullStr Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019
title_full_unstemmed Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019
title_sort Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019
author Garcia, Layara Maria
author_facet Garcia, Layara Maria
author_role author
dc.contributor.advisor1.fl_str_mv Toledo Jr, Antônio Carlos de Castro
dc.contributor.advisor1ID.fl_str_mv 62765167672
dc.contributor.advisor1Lattes.fl_str_mv http://lattes.cnpq.br/2192040830710780
dc.contributor.referee1.fl_str_mv Barra, Juliana Silva
dc.contributor.referee1ID.fl_str_mv 90152905634
dc.contributor.referee1Lattes.fl_str_mv http://lattes.cnpq.br/8251086417913278
dc.contributor.referee2.fl_str_mv Turci, Maria Aparecida
dc.contributor.referee2ID.fl_str_mv 81781407649
dc.contributor.referee2Lattes.fl_str_mv http://lattes.cnpq.br/0507871671078661
dc.contributor.authorID.fl_str_mv 08084923650
dc.contributor.authorLattes.fl_str_mv http://lattes.cnpq.br/6798767394178271
dc.contributor.author.fl_str_mv Garcia, Layara Maria
contributor_str_mv Toledo Jr, Antônio Carlos de Castro
Barra, Juliana Silva
Turci, Maria Aparecida
dc.subject.por.fl_str_mv Avaliação educacional
Competência clínica
Simulação
Treinamento por simulação
topic Avaliação educacional
Competência clínica
Simulação
Treinamento por simulação
Educational Measurement
Clinical Competence
Simulation
Simulation Training
CIENCIAS DA SAUDE::MEDICINA
dc.subject.eng.fl_str_mv Educational Measurement
Clinical Competence
Simulation
Simulation Training
dc.subject.cnpq.fl_str_mv CIENCIAS DA SAUDE::MEDICINA
description The use of clinical skills training through simulation into medical school curricula has been a major innovation for education, enabling students to train ethically in a safe environment without risk to patients. The best way to evaluate skills in a simulated environment is not well defined. Few studies have compared teachers and rating scales reliability. Objective: To describe how different clinical skill assessment scales in simulation laboratory and different teachers profiles interfere with assessment reliability. Methodology: 28 students from the third year and 20 students from the sixth year of UNIFENAS-BH Medical School were recruited. Students performed a practical skills test on newborn anthropometry in the simulation laboratory, where they were filmed for further performance assessment using three scales: Training Level Rating Scale (TL), Global Rating Scale (EG); and checklist (CL). Nine evaluators were selected divided into three profiles: three pediatricians with no experience in teaching skills, three pediatricians with experience in teaching skills, and three skill teachers who were not pediatricians. One teacher from each profile used only one of the three proposed scales, so that the three scales were used in each of the three profiles. The total score for each of the scales was calculated, with a possible total of 9 points. Results: when comparing the different scales, regardless of the teacher profile, it was observed only that the isolated grade of the CL was able to discriminate the third and sixth year students. Multivariate analysis showed that TL, isolated score (p = 0.346) or total score (p = 0.407), was the only scale that was not influenced by the teacher profile. The reliability analysis performed according isolated scales score showed that only the TL has good reliability. The addition of anthropometric measurements increased the reliability of scales and teachers. Conclusion: there is a difference in reliability between the scales. TL plus anthropometric measurements was the most reliable. The teacher profile directly affected the reliability of the scales, but the expert teachers showed acceptable reliability when anthropometric measurements were added to the scales. Only TL was able to correctly discriminate the two groups and was not influenced by teacher profile
publishDate 2019
dc.date.issued.fl_str_mv 2019-12-06
dc.date.accessioned.fl_str_mv 2021-08-16T12:24:31Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.citation.fl_str_mv Garcia, Layara Maria. Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019. 2019. 55f. Dissertação (Programa de Mestrado em Ensino em Saúde) - Universidade José do Rosário Vellano, Belo Horizonte, 2019.
dc.identifier.uri.fl_str_mv http://tede2.unifenas.br:8080/jspui/handle/jspui/294
identifier_str_mv Garcia, Layara Maria. Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019. 2019. 55f. Dissertação (Programa de Mestrado em Ensino em Saúde) - Universidade José do Rosário Vellano, Belo Horizonte, 2019.
url http://tede2.unifenas.br:8080/jspui/handle/jspui/294
dc.language.iso.fl_str_mv por
language por
dc.relation.program.fl_str_mv -7785865496449744764
dc.relation.confidence.fl_str_mv 500
500
600
dc.relation.department.fl_str_mv -7642911903105032531
dc.relation.cnpq.fl_str_mv -969369452308786627
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Universidade José do Rosário Vellano
dc.publisher.program.fl_str_mv Programa de Mestrado em Ensino em Saúde
dc.publisher.initials.fl_str_mv UNIFENAS
dc.publisher.country.fl_str_mv Brasil
dc.publisher.department.fl_str_mv Pós-Graduação
publisher.none.fl_str_mv Universidade José do Rosário Vellano
dc.source.none.fl_str_mv reponame:Biblioteca Digital de Teses e Dissertações da UNIFENAS
instname:Universidade José do Rosário Vellano (UNIFENAS)
instacron:UNIFENAS
instname_str Universidade José do Rosário Vellano (UNIFENAS)
instacron_str UNIFENAS
institution UNIFENAS
reponame_str Biblioteca Digital de Teses e Dissertações da UNIFENAS
collection Biblioteca Digital de Teses e Dissertações da UNIFENAS
bitstream.url.fl_str_mv http://tede2.unifenas.br:8080/tede/bitstream/jspui/294/2/Disserta%C3%A7%C3%A3o+Layara.pdf
http://tede2.unifenas.br:8080/tede/bitstream/jspui/294/1/license.txt
bitstream.checksum.fl_str_mv 7dfb4c18f7fcfe65fb5c53b79d8bbb1e
81634d9675c089eff355707f92149b83
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
repository.name.fl_str_mv Biblioteca Digital de Teses e Dissertações da UNIFENAS - Universidade José do Rosário Vellano (UNIFENAS)
repository.mail.fl_str_mv biblioteca@unifenas.br||biblioteca@unifenas.br
_version_ 1822238997706964992