Student satisfaction evaluation of a higher education institution: an analysis of the methods of the Classical Theory of Measurement and of the Item Response Theory

Detalhes bibliográficos
Autor(a) principal: Petrassi, Anna Cecilia Amaral
Data de Publicação: 2021
Outros Autores: Bornia, Antonio Cezar, Andrade, Dalton Francisco
Tipo de documento: Artigo
Idioma: por
eng
spa
Título da fonte: Ensaio (Rio de Janeiro. Online)
Texto Completo: https://revistas.cesgranrio.org.br/index.php/ensaio/article/view/2192
Resumo: The present work compares the information generated by the Institutional Self-evaluation process of an Federal Institution of Higher Education (Ifes), in the context of the National Higher Education Evaluation System (Sinaes), and analyzed by the IFES Self-evaluation Committee, cycle of 2017, with the same information treated with the Item Response Theory (IRT) in place of the Classical Theory of Measurement, with the objective of demonstrating how the analysis process can benefit from the use of IRT, being a more robust instrument for the analysis and design of actions of improvements for institutional management. For this, we selected the “student category” extract from the evaluation about the institution, in the second cycle of 2017. The two theories, Classical and IRT, were described and compared. With the data collected from the institution, the information curves of the items and the test were calculated and explained, and through the analysis provided by the IRT was demonstrated the gain that can be obtained with its use in institutional management.
id CESGRANRIO_fce80f23878395cc332a652158aa15a1
oai_identifier_str oai:ojs.localhost:article/2192
network_acronym_str CESGRANRIO
network_name_str Ensaio (Rio de Janeiro. Online)
repository_id_str
spelling Student satisfaction evaluation of a higher education institution: an analysis of the methods of the Classical Theory of Measurement and of the Item Response TheoryEvaluación de la satisfacción del estudiante de una institución de Educación Superior: un análisis de la Teoría Clásica de la Medición y la Teoría de la Respuesta al ÍtemAvaliação do nível de satisfação discente de uma instituição de Ensino Superior: uma análise dos métodos da Teoria Clássica da Medida e da Teoria da Resposta ao ItemInstitutional Self-evaluation; Item Response Theory; University ManagementAutoevaluación Institucional; Teoría de la Respuesta al Item; Gestión UniversitariaEducação; Administração; Gestao UniversitariaAutoavaliação Institucional; Teoria da Resposta ao Item; Gestão UniversitáriaThe present work compares the information generated by the Institutional Self-evaluation process of an Federal Institution of Higher Education (Ifes), in the context of the National Higher Education Evaluation System (Sinaes), and analyzed by the IFES Self-evaluation Committee, cycle of 2017, with the same information treated with the Item Response Theory (IRT) in place of the Classical Theory of Measurement, with the objective of demonstrating how the analysis process can benefit from the use of IRT, being a more robust instrument for the analysis and design of actions of improvements for institutional management. For this, we selected the “student category” extract from the evaluation about the institution, in the second cycle of 2017. The two theories, Classical and IRT, were described and compared. With the data collected from the institution, the information curves of the items and the test were calculated and explained, and through the analysis provided by the IRT was demonstrated the gain that can be obtained with its use in institutional management.Este trabajo compara la información generada por el proceso de autoevaluación de una Institución Federal de Educación Superior (Ifes), en el contexto del Sistema Nacional de Evaluación de la Educación Superior (Sinaes), analizada por la Comisión de Evaluación Propia de Ifes, ciclo 2017, con la misma información tratada a partir del uso de la Teoría de Respuesta al Ítem (TRI) en lugar de la Teoría Clásica de la Medida, con el fin de demostrar cómo el proceso de análisis puede beneficiarse del uso de la TRI, siendo un instrumento más robusto para el análisis y la diseño de acciones de mejora en la gestión institucional. Para ello se seleccionó el extracto “categoría discente” de la evaluación de la institución, en el segundo ciclo de 2017. Se describieron y compararon las dos teorías, la clásica y la TRI. Con los datos recolectados de la institución se calcularon y explicaron las curvas de información del ítem y de la prueba, mediante el análisis proporcionado por el TRI se demostró la ganancia que se puede obtener con su uso en la autoevaluación institucional.O presente trabalho compara as informações geradas pelo processo de autoavaliação de uma Instituição Federal de Educação Superior (Ifes), no contexto do Sistema Nacional de Avaliação da Educação Superior (Sinaes), analisadas pela Comissão Própria de Avaliação da Ifes, ciclo de 2017, com as mesmas informações tratadas a partir do uso da Teoria da Resposta ao Item (TRI) no lugar da Teoria Clássica da Medida, com objetivo de demonstrar como o processo de análise pode se beneficiar com a utilização da TRI, sendo um instrumento mais robusto para a análise e o desenho de ações de melhorias na gestão institucional. Para isso, foi selecionado o extrato “categoria discente” da avaliação sobre a instituição, no segundo ciclo de 2017. Foram descritas e comparadas as duas teorias, a clássica e a TRI. Com os dados coletados da instituição, foram calculadas e explicadas as curvas de informação dos itens e do teste, por meio da análise propiciada pela TRI foi demonstrado o ganho que se pode obter com a sua utilização na autoavaliação institucional.Fundação CesgranrioPetrassi, Anna Cecilia AmaralBornia, Antonio CezarAndrade, Dalton Francisco2021-07-05info:eu-repo/semantics/articleinfo:eu-repo/semantics/publishedVersionhttps://revistas.cesgranrio.org.br/index.php/ensaio/article/view/219210.1590/s0104-40362021002902192Ensaio: Avaliação e Políticas Públicas em Educação; v. 29, n. 112 (2021): Revista Ensaio Jul./Set.; 644-6681809-44650104-4036reponame:Ensaio (Rio de Janeiro. Online)instname:Fundação Cesgranrioinstacron:CESGRANRIO-2porengspahttps://revistas.cesgranrio.org.br/index.php/ensaio/article/view/2192/1442https://revistas.cesgranrio.org.br/index.php/ensaio/article/view/2192/1443https://revistas.cesgranrio.org.br/index.php/ensaio/article/view/2192/1444AmericasAtualAmostragem não-probabilísticaDireitos autorais 2020 Revista Ensaio: Avaliação e Políticas Públicas em Educaçãohttp://creativecommons.org/licenses/by-nc/4.0info:eu-repo/semantics/openAccess2021-11-09T20:38:15Zoai:ojs.localhost:article/2192Revistahttps://revistas.cesgranrio.org.br/index.php/ensaioONGhttps://revistas.cesgranrio.org.br/index.php/ensaio/oaiensaio@cesgranrio.org.br||fatimacunha@cesgranrio.org.br||alan@cesgranrio.org.br1809-44650104-4036opendoar:2021-11-09T20:38:15Ensaio (Rio de Janeiro. Online) - Fundação Cesgranriofalse
dc.title.none.fl_str_mv Student satisfaction evaluation of a higher education institution: an analysis of the methods of the Classical Theory of Measurement and of the Item Response Theory
Evaluación de la satisfacción del estudiante de una institución de Educación Superior: un análisis de la Teoría Clásica de la Medición y la Teoría de la Respuesta al Ítem
Avaliação do nível de satisfação discente de uma instituição de Ensino Superior: uma análise dos métodos da Teoria Clássica da Medida e da Teoria da Resposta ao Item
title Student satisfaction evaluation of a higher education institution: an analysis of the methods of the Classical Theory of Measurement and of the Item Response Theory
spellingShingle Student satisfaction evaluation of a higher education institution: an analysis of the methods of the Classical Theory of Measurement and of the Item Response Theory
Petrassi, Anna Cecilia Amaral
Institutional Self-evaluation; Item Response Theory; University Management
Autoevaluación Institucional; Teoría de la Respuesta al Item; Gestión Universitaria
Educação; Administração; Gestao Universitaria
Autoavaliação Institucional; Teoria da Resposta ao Item; Gestão Universitária
title_short Student satisfaction evaluation of a higher education institution: an analysis of the methods of the Classical Theory of Measurement and of the Item Response Theory
title_full Student satisfaction evaluation of a higher education institution: an analysis of the methods of the Classical Theory of Measurement and of the Item Response Theory
title_fullStr Student satisfaction evaluation of a higher education institution: an analysis of the methods of the Classical Theory of Measurement and of the Item Response Theory
title_full_unstemmed Student satisfaction evaluation of a higher education institution: an analysis of the methods of the Classical Theory of Measurement and of the Item Response Theory
title_sort Student satisfaction evaluation of a higher education institution: an analysis of the methods of the Classical Theory of Measurement and of the Item Response Theory
author Petrassi, Anna Cecilia Amaral
author_facet Petrassi, Anna Cecilia Amaral
Bornia, Antonio Cezar
Andrade, Dalton Francisco
author_role author
author2 Bornia, Antonio Cezar
Andrade, Dalton Francisco
author2_role author
author
dc.contributor.none.fl_str_mv


dc.contributor.author.fl_str_mv Petrassi, Anna Cecilia Amaral
Bornia, Antonio Cezar
Andrade, Dalton Francisco
dc.subject.none.fl_str_mv

dc.subject.por.fl_str_mv Institutional Self-evaluation; Item Response Theory; University Management
Autoevaluación Institucional; Teoría de la Respuesta al Item; Gestión Universitaria
Educação; Administração; Gestao Universitaria
Autoavaliação Institucional; Teoria da Resposta ao Item; Gestão Universitária
topic Institutional Self-evaluation; Item Response Theory; University Management
Autoevaluación Institucional; Teoría de la Respuesta al Item; Gestión Universitaria
Educação; Administração; Gestao Universitaria
Autoavaliação Institucional; Teoria da Resposta ao Item; Gestão Universitária
description The present work compares the information generated by the Institutional Self-evaluation process of an Federal Institution of Higher Education (Ifes), in the context of the National Higher Education Evaluation System (Sinaes), and analyzed by the IFES Self-evaluation Committee, cycle of 2017, with the same information treated with the Item Response Theory (IRT) in place of the Classical Theory of Measurement, with the objective of demonstrating how the analysis process can benefit from the use of IRT, being a more robust instrument for the analysis and design of actions of improvements for institutional management. For this, we selected the “student category” extract from the evaluation about the institution, in the second cycle of 2017. The two theories, Classical and IRT, were described and compared. With the data collected from the institution, the information curves of the items and the test were calculated and explained, and through the analysis provided by the IRT was demonstrated the gain that can be obtained with its use in institutional management.
publishDate 2021
dc.date.none.fl_str_mv 2021-07-05
dc.type.none.fl_str_mv
dc.type.driver.fl_str_mv info:eu-repo/semantics/article
info:eu-repo/semantics/publishedVersion
format article
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://revistas.cesgranrio.org.br/index.php/ensaio/article/view/2192
10.1590/s0104-40362021002902192
url https://revistas.cesgranrio.org.br/index.php/ensaio/article/view/2192
identifier_str_mv 10.1590/s0104-40362021002902192
dc.language.iso.fl_str_mv por
eng
spa
language por
eng
spa
dc.relation.none.fl_str_mv https://revistas.cesgranrio.org.br/index.php/ensaio/article/view/2192/1442
https://revistas.cesgranrio.org.br/index.php/ensaio/article/view/2192/1443
https://revistas.cesgranrio.org.br/index.php/ensaio/article/view/2192/1444
dc.rights.driver.fl_str_mv Direitos autorais 2020 Revista Ensaio: Avaliação e Políticas Públicas em Educação
http://creativecommons.org/licenses/by-nc/4.0
info:eu-repo/semantics/openAccess
rights_invalid_str_mv Direitos autorais 2020 Revista Ensaio: Avaliação e Políticas Públicas em Educação
http://creativecommons.org/licenses/by-nc/4.0
eu_rights_str_mv openAccess
dc.coverage.none.fl_str_mv





Americas
Atual
Amostragem não-probabilística
dc.publisher.none.fl_str_mv Fundação Cesgranrio
publisher.none.fl_str_mv Fundação Cesgranrio
dc.source.none.fl_str_mv Ensaio: Avaliação e Políticas Públicas em Educação; v. 29, n. 112 (2021): Revista Ensaio Jul./Set.; 644-668
1809-4465
0104-4036
reponame:Ensaio (Rio de Janeiro. Online)
instname:Fundação Cesgranrio
instacron:CESGRANRIO-2
instname_str Fundação Cesgranrio
instacron_str CESGRANRIO-2
institution CESGRANRIO-2
reponame_str Ensaio (Rio de Janeiro. Online)
collection Ensaio (Rio de Janeiro. Online)
repository.name.fl_str_mv Ensaio (Rio de Janeiro. Online) - Fundação Cesgranrio
repository.mail.fl_str_mv ensaio@cesgranrio.org.br||fatimacunha@cesgranrio.org.br||alan@cesgranrio.org.br
_version_ 1754832032931774464

Registros relacionados