A Network approach to deal with the problem of examinee choice under item response theory

Detalhes bibliográficos
Autor(a) principal: Carolina Silva Pena
Data de Publicação: 2016
Tipo de documento: Tese
Idioma: por
Título da fonte: Repositório Institucional da UFMG
Texto Completo: http://hdl.handle.net/1843/BUBD-AHSKQF
Resumo: Em uma situação típica de avaliação utilizando questões de prova, os candidatos não podem escolher quais itens preferem responder. A principal razão é um problema técnico em se obter estimativas confiáveis para as habilidades dos candidatos e as dificuldades dos itens. Este trabalho propõe uma nova representação dos dados utilizando análise de redes. As questões de prova, e os itens selecionados, para cada candidato, são codificados como camadas, vértices e arestas em uma rede multicamadas. Dessa forma, um novo modelo de Teoria de Resposta ao Item (TRI), que incorpora a informação obtida a partir da rede multicamadas utilizando modelagem Bayesiana, é proposto. Diversos estudos de simulação, nos quais os candidatos podem escolher um subconjunto de itens, foram realizados. Os resultados mostram uma melhora substancial na recuperação dos parâmetros utilizando o modelo proposto em comparação ao modelo convencional de TRI. Este modelo é a primeira proposta que permite obter estimativas satisfatórias em cenários críticos reportados naliteratura
id UFMG_2be2afa65e52395dbc8a01efd0fc767b
oai_identifier_str oai:repositorio.ufmg.br:1843/BUBD-AHSKQF
network_acronym_str UFMG
network_name_str Repositório Institucional da UFMG
repository_id_str
spelling Marcelo Azevedo CostaErica Castilho RodriguesAllbens Atman Picardi FariaMarcos Antonio da Cunha SantosMartin Gomez RavettiCarolina Silva Pena2019-08-13T09:24:52Z2019-08-13T09:24:52Z2016-12-06http://hdl.handle.net/1843/BUBD-AHSKQFEm uma situação típica de avaliação utilizando questões de prova, os candidatos não podem escolher quais itens preferem responder. A principal razão é um problema técnico em se obter estimativas confiáveis para as habilidades dos candidatos e as dificuldades dos itens. Este trabalho propõe uma nova representação dos dados utilizando análise de redes. As questões de prova, e os itens selecionados, para cada candidato, são codificados como camadas, vértices e arestas em uma rede multicamadas. Dessa forma, um novo modelo de Teoria de Resposta ao Item (TRI), que incorpora a informação obtida a partir da rede multicamadas utilizando modelagem Bayesiana, é proposto. Diversos estudos de simulação, nos quais os candidatos podem escolher um subconjunto de itens, foram realizados. Os resultados mostram uma melhora substancial na recuperação dos parâmetros utilizando o modelo proposto em comparação ao modelo convencional de TRI. Este modelo é a primeira proposta que permite obter estimativas satisfatórias em cenários críticos reportados naliteraturaIn a typical questionnaire testing situation, the examinees are not allowed to choose which items they would rather answer. The main reason is a technical issue in obtaining satisfactory statistical estimates of examinees' abilities and items' difficulties. This paper introduces a new Item Response Theory (IRT) model that incorporates information from a novel representation of the questionnaire data, using network analysis. The questionnaire data set is coded as layers, the items are coded as nodes and the selected items are connected by edges. The new proposed Item Response Theory (IRT) model incorporates networkinformation using Bayesian estimation. Several simulation studies in which examinees are allowed to select a subset of items were performed. Results show substantial improvements in the parameters' recovery over the standard model. To the best of our knowledge, this is the first proposal to obtaining satisfactory IRT statistical estimates in some critical scenarios reported in literature.Universidade Federal de Minas GeraisUFMGTeoria da resposta do itemPERT (Análise de redes)Teoria bayesiana de decisão estatisticaEngenharia de produçãoAnálise de RedesSeleção de itensMedidas de CentralidadeTeoria deResposta ao ItemModelagem BayesianaA Network approach to deal with the problem of examinee choice under item response theoryinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesisinfo:eu-repo/semantics/openAccessporreponame:Repositório Institucional da UFMGinstname:Universidade Federal de Minas Gerais (UFMG)instacron:UFMGORIGINALtese_carolinapena.pdfapplication/pdf7943156https://repositorio.ufmg.br/bitstream/1843/BUBD-AHSKQF/1/tese_carolinapena.pdf7283a4982cfbd68a623144aba0de9283MD51TEXTtese_carolinapena.pdf.txttese_carolinapena.pdf.txtExtracted texttext/plain131281https://repositorio.ufmg.br/bitstream/1843/BUBD-AHSKQF/2/tese_carolinapena.pdf.txt145a8d37cd8f2090da2aa6fd6abcd751MD521843/BUBD-AHSKQF2020-01-29 14:00:06.164oai:repositorio.ufmg.br:1843/BUBD-AHSKQFRepositório de PublicaçõesPUBhttps://repositorio.ufmg.br/oaiopendoar:2020-01-29T17:00:06Repositório Institucional da UFMG - Universidade Federal de Minas Gerais (UFMG)false
dc.title.pt_BR.fl_str_mv A Network approach to deal with the problem of examinee choice under item response theory
title A Network approach to deal with the problem of examinee choice under item response theory
spellingShingle A Network approach to deal with the problem of examinee choice under item response theory
Carolina Silva Pena
Análise de Redes
Seleção de itens
Medidas de Centralidade
Teoria de
Resposta ao Item
Modelagem Bayesiana
Teoria da resposta do item
PERT (Análise de redes)
Teoria bayesiana de decisão estatistica
Engenharia de produção
title_short A Network approach to deal with the problem of examinee choice under item response theory
title_full A Network approach to deal with the problem of examinee choice under item response theory
title_fullStr A Network approach to deal with the problem of examinee choice under item response theory
title_full_unstemmed A Network approach to deal with the problem of examinee choice under item response theory
title_sort A Network approach to deal with the problem of examinee choice under item response theory
author Carolina Silva Pena
author_facet Carolina Silva Pena
author_role author
dc.contributor.advisor1.fl_str_mv Marcelo Azevedo Costa
dc.contributor.referee1.fl_str_mv Erica Castilho Rodrigues
dc.contributor.referee2.fl_str_mv Allbens Atman Picardi Faria
dc.contributor.referee3.fl_str_mv Marcos Antonio da Cunha Santos
dc.contributor.referee4.fl_str_mv Martin Gomez Ravetti
dc.contributor.author.fl_str_mv Carolina Silva Pena
contributor_str_mv Marcelo Azevedo Costa
Erica Castilho Rodrigues
Allbens Atman Picardi Faria
Marcos Antonio da Cunha Santos
Martin Gomez Ravetti
dc.subject.por.fl_str_mv Análise de Redes
Seleção de itens
Medidas de Centralidade
Teoria de
Resposta ao Item
Modelagem Bayesiana
topic Análise de Redes
Seleção de itens
Medidas de Centralidade
Teoria de
Resposta ao Item
Modelagem Bayesiana
Teoria da resposta do item
PERT (Análise de redes)
Teoria bayesiana de decisão estatistica
Engenharia de produção
dc.subject.other.pt_BR.fl_str_mv Teoria da resposta do item
PERT (Análise de redes)
Teoria bayesiana de decisão estatistica
Engenharia de produção
description Em uma situação típica de avaliação utilizando questões de prova, os candidatos não podem escolher quais itens preferem responder. A principal razão é um problema técnico em se obter estimativas confiáveis para as habilidades dos candidatos e as dificuldades dos itens. Este trabalho propõe uma nova representação dos dados utilizando análise de redes. As questões de prova, e os itens selecionados, para cada candidato, são codificados como camadas, vértices e arestas em uma rede multicamadas. Dessa forma, um novo modelo de Teoria de Resposta ao Item (TRI), que incorpora a informação obtida a partir da rede multicamadas utilizando modelagem Bayesiana, é proposto. Diversos estudos de simulação, nos quais os candidatos podem escolher um subconjunto de itens, foram realizados. Os resultados mostram uma melhora substancial na recuperação dos parâmetros utilizando o modelo proposto em comparação ao modelo convencional de TRI. Este modelo é a primeira proposta que permite obter estimativas satisfatórias em cenários críticos reportados naliteratura
publishDate 2016
dc.date.issued.fl_str_mv 2016-12-06
dc.date.accessioned.fl_str_mv 2019-08-13T09:24:52Z
dc.date.available.fl_str_mv 2019-08-13T09:24:52Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/doctoralThesis
format doctoralThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://hdl.handle.net/1843/BUBD-AHSKQF
url http://hdl.handle.net/1843/BUBD-AHSKQF
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.publisher.none.fl_str_mv Universidade Federal de Minas Gerais
dc.publisher.initials.fl_str_mv UFMG
publisher.none.fl_str_mv Universidade Federal de Minas Gerais
dc.source.none.fl_str_mv reponame:Repositório Institucional da UFMG
instname:Universidade Federal de Minas Gerais (UFMG)
instacron:UFMG
instname_str Universidade Federal de Minas Gerais (UFMG)
instacron_str UFMG
institution UFMG
reponame_str Repositório Institucional da UFMG
collection Repositório Institucional da UFMG
bitstream.url.fl_str_mv https://repositorio.ufmg.br/bitstream/1843/BUBD-AHSKQF/1/tese_carolinapena.pdf
https://repositorio.ufmg.br/bitstream/1843/BUBD-AHSKQF/2/tese_carolinapena.pdf.txt
bitstream.checksum.fl_str_mv 7283a4982cfbd68a623144aba0de9283
145a8d37cd8f2090da2aa6fd6abcd751
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
repository.name.fl_str_mv Repositório Institucional da UFMG - Universidade Federal de Minas Gerais (UFMG)
repository.mail.fl_str_mv
_version_ 1803589262081261568