Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019
Autor(a) principal: | |
---|---|
Data de Publicação: | 2019 |
Tipo de documento: | Dissertação |
Idioma: | por |
Título da fonte: | Biblioteca Digital de Teses e Dissertações da UNIFENAS |
Texto Completo: | http://tede2.unifenas.br:8080/jspui/handle/jspui/294 |
Resumo: | The use of clinical skills training through simulation into medical school curricula has been a major innovation for education, enabling students to train ethically in a safe environment without risk to patients. The best way to evaluate skills in a simulated environment is not well defined. Few studies have compared teachers and rating scales reliability. Objective: To describe how different clinical skill assessment scales in simulation laboratory and different teachers profiles interfere with assessment reliability. Methodology: 28 students from the third year and 20 students from the sixth year of UNIFENAS-BH Medical School were recruited. Students performed a practical skills test on newborn anthropometry in the simulation laboratory, where they were filmed for further performance assessment using three scales: Training Level Rating Scale (TL), Global Rating Scale (EG); and checklist (CL). Nine evaluators were selected divided into three profiles: three pediatricians with no experience in teaching skills, three pediatricians with experience in teaching skills, and three skill teachers who were not pediatricians. One teacher from each profile used only one of the three proposed scales, so that the three scales were used in each of the three profiles. The total score for each of the scales was calculated, with a possible total of 9 points. Results: when comparing the different scales, regardless of the teacher profile, it was observed only that the isolated grade of the CL was able to discriminate the third and sixth year students. Multivariate analysis showed that TL, isolated score (p = 0.346) or total score (p = 0.407), was the only scale that was not influenced by the teacher profile. The reliability analysis performed according isolated scales score showed that only the TL has good reliability. The addition of anthropometric measurements increased the reliability of scales and teachers. Conclusion: there is a difference in reliability between the scales. TL plus anthropometric measurements was the most reliable. The teacher profile directly affected the reliability of the scales, but the expert teachers showed acceptable reliability when anthropometric measurements were added to the scales. Only TL was able to correctly discriminate the two groups and was not influenced by teacher profile |
id |
UNFE_5502b3ac337fab6c885a0c2ece33742b |
---|---|
oai_identifier_str |
oai:tede2.unifenas.br:jspui/294 |
network_acronym_str |
UNFE |
network_name_str |
Biblioteca Digital de Teses e Dissertações da UNIFENAS |
repository_id_str |
|
spelling |
Toledo Jr, Antônio Carlos de Castro62765167672http://lattes.cnpq.br/2192040830710780Barra, Juliana Silva90152905634http://lattes.cnpq.br/8251086417913278Turci, Maria Aparecida81781407649http://lattes.cnpq.br/050787167107866108084923650http://lattes.cnpq.br/6798767394178271Garcia, Layara Maria2021-08-16T12:24:31Z2019-12-06Garcia, Layara Maria. Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019. 2019. 55f. Dissertação (Programa de Mestrado em Ensino em Saúde) - Universidade José do Rosário Vellano, Belo Horizonte, 2019.http://tede2.unifenas.br:8080/jspui/handle/jspui/294The use of clinical skills training through simulation into medical school curricula has been a major innovation for education, enabling students to train ethically in a safe environment without risk to patients. The best way to evaluate skills in a simulated environment is not well defined. Few studies have compared teachers and rating scales reliability. Objective: To describe how different clinical skill assessment scales in simulation laboratory and different teachers profiles interfere with assessment reliability. Methodology: 28 students from the third year and 20 students from the sixth year of UNIFENAS-BH Medical School were recruited. Students performed a practical skills test on newborn anthropometry in the simulation laboratory, where they were filmed for further performance assessment using three scales: Training Level Rating Scale (TL), Global Rating Scale (EG); and checklist (CL). Nine evaluators were selected divided into three profiles: three pediatricians with no experience in teaching skills, three pediatricians with experience in teaching skills, and three skill teachers who were not pediatricians. One teacher from each profile used only one of the three proposed scales, so that the three scales were used in each of the three profiles. The total score for each of the scales was calculated, with a possible total of 9 points. Results: when comparing the different scales, regardless of the teacher profile, it was observed only that the isolated grade of the CL was able to discriminate the third and sixth year students. Multivariate analysis showed that TL, isolated score (p = 0.346) or total score (p = 0.407), was the only scale that was not influenced by the teacher profile. The reliability analysis performed according isolated scales score showed that only the TL has good reliability. The addition of anthropometric measurements increased the reliability of scales and teachers. Conclusion: there is a difference in reliability between the scales. TL plus anthropometric measurements was the most reliable. The teacher profile directly affected the reliability of the scales, but the expert teachers showed acceptable reliability when anthropometric measurements were added to the scales. Only TL was able to correctly discriminate the two groups and was not influenced by teacher profileA incorporação do treinamento de habilidades clínicas através da simulação nos currículos das escolas médicas foi uma inovação importante para educação, permitindo que os estudantes se capacitem de forma ética em ambiente seguro e sem oferecer riscos aos pacientes. A melhor forma de avaliar habilidades em ambiente simulado não está totalmente definida. Poucos estudos compararam escalas de avaliação e avaliadores em relação a sua confiabilidade. Objetivo: descrever como diferentes escalas de avaliação de habilidades clínicas em laboratório de simulação e diferentes perfis de avaliadores interferem na confiabilidade da avaliação. Metodologia: foram recrutados 28 alunos do terceiro e 20 alunos do sexto anos do curso de medicina da UNIFENAS-BH. Os estudantes realizaram uma prova prática de habilidades sobrea antropometria do recém-nascido no laboratório de habilidades, onde foram filmados para posterior avaliação do desempenho através de três escalas: escala de avaliação do nível de treinamento (NT), escala de classificação global (EG) e lista de verificação ou checklist (CL). Foram selecionados nove avaliadores divididos em três perfis: três pediatras sem experiência em ensino de habilidades, três pediatras com experiência em ensino de habilidade e três professores de habilidades que não eram pediatras. Um avaliador de cada perfil utilizou apenas uma das três escalas propostas, de forma que as três escalas foram utilizadas em cada um dos três perfis de avaliadores. Foi calculado o escore total para cada uma das escalas, num total possível de 9 pontos. Resultados: ao comparar as diferentes escalas, independentemente do perfil do avaliador, observou-se apenas que a nota isolada do CL foi capaz de discriminar os alunos do terceiro e do sexto anos. A análise multivariada mostrou que a NT, isolada (p=0,346) ou total (p=0,407), foi à única escala que não foi influenciada pelo perfil do avaliador. A análise de confiabilidade realizada de acordo com as escalas isoladas demonstrou que apenas a NT apresenta boa confiabilidade. O acréscimo da nota das medidas antropométricas aumentou a confiabilidade entre as escalas e avaliadores. Conclusão: existe diferença na confiabilidade entre as escalas. A NT acrescida de dados antropométricos foi a de maior confiabilidade. O perfil do avaliador interferiu diretamente na confiabilidade das escalas, porém os avaliadores especialistas apresentaram confiabilidade aceitável quando a escala foi somada aos dados objetivos. Apenas a NT foi capaz de discriminar corretamente os dois grupos e não foi influenciada pelo perfil do avaliadorSubmitted by Kely Alves (kely.alves@unifenas.br) on 2021-01-11T17:41:43Z No. of bitstreams: 1 Dissertação Layara.pdf: 949828 bytes, checksum: 7dfb4c18f7fcfe65fb5c53b79d8bbb1e (MD5)Approved for entry into archive by Samira Ramos (samira.ramos@unifenas.br) on 2021-08-16T12:22:05Z (GMT) No. of bitstreams: 1 Dissertação Layara.pdf: 949828 bytes, checksum: 7dfb4c18f7fcfe65fb5c53b79d8bbb1e (MD5)Approved for entry into archive by Samira Ramos (samira.ramos@unifenas.br) on 2021-08-16T12:23:00Z (GMT) No. of bitstreams: 1 Dissertação Layara.pdf: 949828 bytes, checksum: 7dfb4c18f7fcfe65fb5c53b79d8bbb1e (MD5)Made available in DSpace on 2021-08-16T12:24:31Z (GMT). No. of bitstreams: 1 Dissertação Layara.pdf: 949828 bytes, checksum: 7dfb4c18f7fcfe65fb5c53b79d8bbb1e (MD5) Previous issue date: 2019-12-06application/pdfporUniversidade José do Rosário VellanoPrograma de Mestrado em Ensino em SaúdeUNIFENASBrasilPós-GraduaçãoAvaliação educacionalCompetência clínicaSimulaçãoTreinamento por simulaçãoEducational MeasurementClinical CompetenceSimulationSimulation TrainingCIENCIAS DA SAUDE::MEDICINAComparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019Comparison of reliability between three scales for assessing clinical skills in a simulation laboratory and three different types of evaluators. Unicentric experimental study, 2019info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesis-7785865496449744764500500600-7642911903105032531-969369452308786627info:eu-repo/semantics/openAccessreponame:Biblioteca Digital de Teses e Dissertações da UNIFENASinstname:Universidade José do Rosário Vellano (UNIFENAS)instacron:UNIFENASORIGINALDissertação Layara.pdfDissertação Layara.pdfapplication/pdf949828http://tede2.unifenas.br:8080/tede/bitstream/jspui/294/2/Disserta%C3%A7%C3%A3o+Layara.pdf7dfb4c18f7fcfe65fb5c53b79d8bbb1eMD52LICENSElicense.txtlicense.txttext/plain; charset=utf-81063http://tede2.unifenas.br:8080/tede/bitstream/jspui/294/1/license.txt81634d9675c089eff355707f92149b83MD51jspui/2942021-08-16 09:24:31.823oai:tede2.unifenas.br:jspui/294TGljZW7Dp2EgZGUgZGlzdHJpYnVpw6fDo28gbsOjbyBleGNsdXNpdmEuDQoNCkNvbSBhIGFwcmVzZW50YcOnw6NvIGRlc3RhIGxpY2Vuw6dhIGV1LCBMYXlhcmEgTWFyaWEgR2FyY2lhICwgY29uY2VkbyDDoCBVbml2ZXJzaWRhZGUgSm9zw6kgZG8gUm9zw6FyaW8gVmVsbGFubyAtIFVOSUZFTkFTIG8gZGlyZWl0byBuw6NvLWV4Y2x1c2l2byBkZSByZXByb2R1emlyLCAgdHJhZHV6aXIsIGUvb3UgZGlzdHJpYnVpciBhIGRpc3NlcnRhw6fDo28gKGluY2x1aW5kbyBvIHJlc3VtbykgcG9yIHRvZG8gbyBtdW5kbyBubyBmb3JtYXRvIGltcHJlc3NvIGUgZWxldHLDtG5pY28gZSBlbSBxdWFscXVlciBtZWlvLCBpbmNsdWluZG8gb3MgZm9ybWF0b3Mgw6F1ZGlvIG91IHbDrWRlby4NCg0KQ29uY29yZG8gcXVlIGEgVU5JRkVOQVMgcG9kZSwgc2VtIGFsdGVyYXIgbyBjb250ZcO6ZG8sIHRyYW5zcG9yIGEgc3VhIGRpc3NlcnRhw6fDo28gcGFyYSBxdWFscXVlciBtZWlvIG91IGZvcm1hdG8gcGFyYSBmaW5zIGRlIHByZXNlcnZhw6fDo28uDQoNCkNvbmNvcmRvIHF1ZSBhIFVOSUZFTkFTIHBvZGUgbWFudGVyIG1haXMgZGUgdW1hIGPDs3BpYSBhIHN1YSBkaXNzZXJ0YcOnw6NvIHBhcmEgZmlucyBkZSBzZWd1cmFuw6dhLCBiYWNrLXVwIGUgcHJlc2VydmHDp8Ojby4NCkRlY2xhcm8gcXVlIGEgbWluaGEgZGlzc2VydGHDp8OjbyDDqSBvcmlnaW5hbCBlIGNvbmNlZG8gb3MgZGlyZWl0b3MgY29udGlkb3MgbmVzdGEgbGljZW7Dp2EuIEUgdGFtYsOpbSBkZWNsYXJvIHF1ZSBvIGRlcMOzc2l0byBkYSBtaW5oYSB0ZXNlIG7Do28gaW5mcmluZ2UgZGlyZWl0b3MgYXV0b3JhaXMgZGUgbmluZ3XDqW0uDQoNCg0KQSBVTklGRU5BUyBzZSBjb21wcm9tZXRlIGEgaWRlbnRpZmljYXIgY2xhcmFtZW50ZSBxdWUgTGF5YXJhIE1hcmlhIEdhcmNpYSAgw6kgZGVudGVudG9yKGEpIGRvcyBkaXJlaXRvcyBhdXRvcmFpcyBkYSBkaXNzZXJ0YcOnw6NvLCBlIG7Do28gZmFyw6EgcXVhbHF1ZXIgYWx0ZXJhw6fDo28sIGFsw6ltIGRhcXVlbGFzIGNvbmNlZGlkYXMgcG9yIGVzdGEgbGljZW7Dp2EuDQoNCg==Biblioteca Digital de Teses e Dissertaçõeshttp://tede2.unifenas.br:8080/jspui/http://tede2.unifenas.br:8080/oai/requestbiblioteca@unifenas.br||biblioteca@unifenas.bropendoar:2021-08-16T12:24:31Biblioteca Digital de Teses e Dissertações da UNIFENAS - Universidade José do Rosário Vellano (UNIFENAS)false |
dc.title.por.fl_str_mv |
Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019 |
dc.title.alternative.eng.fl_str_mv |
Comparison of reliability between three scales for assessing clinical skills in a simulation laboratory and three different types of evaluators. Unicentric experimental study, 2019 |
title |
Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019 |
spellingShingle |
Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019 Garcia, Layara Maria Avaliação educacional Competência clínica Simulação Treinamento por simulação Educational Measurement Clinical Competence Simulation Simulation Training CIENCIAS DA SAUDE::MEDICINA |
title_short |
Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019 |
title_full |
Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019 |
title_fullStr |
Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019 |
title_full_unstemmed |
Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019 |
title_sort |
Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019 |
author |
Garcia, Layara Maria |
author_facet |
Garcia, Layara Maria |
author_role |
author |
dc.contributor.advisor1.fl_str_mv |
Toledo Jr, Antônio Carlos de Castro |
dc.contributor.advisor1ID.fl_str_mv |
62765167672 |
dc.contributor.advisor1Lattes.fl_str_mv |
http://lattes.cnpq.br/2192040830710780 |
dc.contributor.referee1.fl_str_mv |
Barra, Juliana Silva |
dc.contributor.referee1ID.fl_str_mv |
90152905634 |
dc.contributor.referee1Lattes.fl_str_mv |
http://lattes.cnpq.br/8251086417913278 |
dc.contributor.referee2.fl_str_mv |
Turci, Maria Aparecida |
dc.contributor.referee2ID.fl_str_mv |
81781407649 |
dc.contributor.referee2Lattes.fl_str_mv |
http://lattes.cnpq.br/0507871671078661 |
dc.contributor.authorID.fl_str_mv |
08084923650 |
dc.contributor.authorLattes.fl_str_mv |
http://lattes.cnpq.br/6798767394178271 |
dc.contributor.author.fl_str_mv |
Garcia, Layara Maria |
contributor_str_mv |
Toledo Jr, Antônio Carlos de Castro Barra, Juliana Silva Turci, Maria Aparecida |
dc.subject.por.fl_str_mv |
Avaliação educacional Competência clínica Simulação Treinamento por simulação |
topic |
Avaliação educacional Competência clínica Simulação Treinamento por simulação Educational Measurement Clinical Competence Simulation Simulation Training CIENCIAS DA SAUDE::MEDICINA |
dc.subject.eng.fl_str_mv |
Educational Measurement Clinical Competence Simulation Simulation Training |
dc.subject.cnpq.fl_str_mv |
CIENCIAS DA SAUDE::MEDICINA |
description |
The use of clinical skills training through simulation into medical school curricula has been a major innovation for education, enabling students to train ethically in a safe environment without risk to patients. The best way to evaluate skills in a simulated environment is not well defined. Few studies have compared teachers and rating scales reliability. Objective: To describe how different clinical skill assessment scales in simulation laboratory and different teachers profiles interfere with assessment reliability. Methodology: 28 students from the third year and 20 students from the sixth year of UNIFENAS-BH Medical School were recruited. Students performed a practical skills test on newborn anthropometry in the simulation laboratory, where they were filmed for further performance assessment using three scales: Training Level Rating Scale (TL), Global Rating Scale (EG); and checklist (CL). Nine evaluators were selected divided into three profiles: three pediatricians with no experience in teaching skills, three pediatricians with experience in teaching skills, and three skill teachers who were not pediatricians. One teacher from each profile used only one of the three proposed scales, so that the three scales were used in each of the three profiles. The total score for each of the scales was calculated, with a possible total of 9 points. Results: when comparing the different scales, regardless of the teacher profile, it was observed only that the isolated grade of the CL was able to discriminate the third and sixth year students. Multivariate analysis showed that TL, isolated score (p = 0.346) or total score (p = 0.407), was the only scale that was not influenced by the teacher profile. The reliability analysis performed according isolated scales score showed that only the TL has good reliability. The addition of anthropometric measurements increased the reliability of scales and teachers. Conclusion: there is a difference in reliability between the scales. TL plus anthropometric measurements was the most reliable. The teacher profile directly affected the reliability of the scales, but the expert teachers showed acceptable reliability when anthropometric measurements were added to the scales. Only TL was able to correctly discriminate the two groups and was not influenced by teacher profile |
publishDate |
2019 |
dc.date.issued.fl_str_mv |
2019-12-06 |
dc.date.accessioned.fl_str_mv |
2021-08-16T12:24:31Z |
dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
dc.type.driver.fl_str_mv |
info:eu-repo/semantics/masterThesis |
format |
masterThesis |
status_str |
publishedVersion |
dc.identifier.citation.fl_str_mv |
Garcia, Layara Maria. Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019. 2019. 55f. Dissertação (Programa de Mestrado em Ensino em Saúde) - Universidade José do Rosário Vellano, Belo Horizonte, 2019. |
dc.identifier.uri.fl_str_mv |
http://tede2.unifenas.br:8080/jspui/handle/jspui/294 |
identifier_str_mv |
Garcia, Layara Maria. Comparação da confiabilidade entre três escalas para avaliação de habilidades clínicas em laboratório de simulação e três tipos diferentes de avaliadores. Estudo experimental unicêntrico, 2019. 2019. 55f. Dissertação (Programa de Mestrado em Ensino em Saúde) - Universidade José do Rosário Vellano, Belo Horizonte, 2019. |
url |
http://tede2.unifenas.br:8080/jspui/handle/jspui/294 |
dc.language.iso.fl_str_mv |
por |
language |
por |
dc.relation.program.fl_str_mv |
-7785865496449744764 |
dc.relation.confidence.fl_str_mv |
500 500 600 |
dc.relation.department.fl_str_mv |
-7642911903105032531 |
dc.relation.cnpq.fl_str_mv |
-969369452308786627 |
dc.rights.driver.fl_str_mv |
info:eu-repo/semantics/openAccess |
eu_rights_str_mv |
openAccess |
dc.format.none.fl_str_mv |
application/pdf |
dc.publisher.none.fl_str_mv |
Universidade José do Rosário Vellano |
dc.publisher.program.fl_str_mv |
Programa de Mestrado em Ensino em Saúde |
dc.publisher.initials.fl_str_mv |
UNIFENAS |
dc.publisher.country.fl_str_mv |
Brasil |
dc.publisher.department.fl_str_mv |
Pós-Graduação |
publisher.none.fl_str_mv |
Universidade José do Rosário Vellano |
dc.source.none.fl_str_mv |
reponame:Biblioteca Digital de Teses e Dissertações da UNIFENAS instname:Universidade José do Rosário Vellano (UNIFENAS) instacron:UNIFENAS |
instname_str |
Universidade José do Rosário Vellano (UNIFENAS) |
instacron_str |
UNIFENAS |
institution |
UNIFENAS |
reponame_str |
Biblioteca Digital de Teses e Dissertações da UNIFENAS |
collection |
Biblioteca Digital de Teses e Dissertações da UNIFENAS |
bitstream.url.fl_str_mv |
http://tede2.unifenas.br:8080/tede/bitstream/jspui/294/2/Disserta%C3%A7%C3%A3o+Layara.pdf http://tede2.unifenas.br:8080/tede/bitstream/jspui/294/1/license.txt |
bitstream.checksum.fl_str_mv |
7dfb4c18f7fcfe65fb5c53b79d8bbb1e 81634d9675c089eff355707f92149b83 |
bitstream.checksumAlgorithm.fl_str_mv |
MD5 MD5 |
repository.name.fl_str_mv |
Biblioteca Digital de Teses e Dissertações da UNIFENAS - Universidade José do Rosário Vellano (UNIFENAS) |
repository.mail.fl_str_mv |
biblioteca@unifenas.br||biblioteca@unifenas.br |
_version_ |
1822238997706964992 |