Testes adaptativos sensíveis ao conteúdo de banco de itens: uma aplicação em exames de proficiência em inglês para programas de pós-graduação

Detalhes bibliográficos
Autor(a) principal: Oliveira, Leandro Henrique Mendonça de
Data de Publicação: 2002
Tipo de documento: Dissertação
Idioma: por
Título da fonte: Biblioteca Digital de Teses e Dissertações da USP
Texto Completo: https://www.teses.usp.br/teses/disponiveis/55/55134/tde-17022020-145608/
Resumo: A aplicação de Testes Adaptativos Computadorizados a vários tipos de avaliações e domínios tem se tornado cada vez mais fácil devido ao suporte teórico da Teoria de Resposta de Itens (TRI), a maior disponibilidade de computadores pessoais mais potentes e ao desenvolvimento de software rodando nestes computadores nestes computadores para realizar as análises da TRI. Os testes adaptativos ajustam as suas questões ao nível de habilidade individual de cada estudante, adaptando-Se a capacidade de cada um, gerando uma avaliação mais eficiente e de maior qualidade. A existência de um banco de itens calibrado, de acordo com os modelos estatísticos da TRI, permite a administração adequada dos testes adaptativos. As principais dificuldades de implantação dos testes adaptativos são a necessidade de um estudo empírico em larga escala, envolvendo profissionais de várias áreas, para uma boa calibração do banco de itens e a geração de avaliações multidimensionais, isto é, avaliações que atendam a diferentes conteúdos de uma área do conhecimento. O presente trabalho se propôs a popular e calibrar um banco de itens do domínio de inglês instrumental explorando técnicas sensíveis ao conteúdo do banco de itens para permitir a avaliação de varias habilidades. Atualmente, o banco possui 103 itens e estimamos que em três semestres ele vira a conter o número ideal de itens para seu uso em um teste adaptativo, um tempo razoável, dado o número de alunos do programa de pósgraduação. Adicionalmente, foram desenvolvidos um sistema de gerência desse banco e a modelagem de um sistema de avaliação adaptativa que podem ser utilizados tanto para a avaliação diagnóstica do inglês instrumental, quanto para a avaliação formal da proficiência em inglês para admissão em programas de mestrado. A modelagem foi bem detalhada para permitir uma implementação fácil do sistema, dada a dificuldade inerente à teoria estatística utilizada em testes adaptativos,
id USP_a8ff42ce1289fbf11780b5b54f1d2048
oai_identifier_str oai:teses.usp.br:tde-17022020-145608
network_acronym_str USP
network_name_str Biblioteca Digital de Teses e Dissertações da USP
repository_id_str 2721
spelling Testes adaptativos sensíveis ao conteúdo de banco de itens: uma aplicação em exames de proficiência em inglês para programas de pós-graduaçãoNot availableNão disponívelNot availableA aplicação de Testes Adaptativos Computadorizados a vários tipos de avaliações e domínios tem se tornado cada vez mais fácil devido ao suporte teórico da Teoria de Resposta de Itens (TRI), a maior disponibilidade de computadores pessoais mais potentes e ao desenvolvimento de software rodando nestes computadores nestes computadores para realizar as análises da TRI. Os testes adaptativos ajustam as suas questões ao nível de habilidade individual de cada estudante, adaptando-Se a capacidade de cada um, gerando uma avaliação mais eficiente e de maior qualidade. A existência de um banco de itens calibrado, de acordo com os modelos estatísticos da TRI, permite a administração adequada dos testes adaptativos. As principais dificuldades de implantação dos testes adaptativos são a necessidade de um estudo empírico em larga escala, envolvendo profissionais de várias áreas, para uma boa calibração do banco de itens e a geração de avaliações multidimensionais, isto é, avaliações que atendam a diferentes conteúdos de uma área do conhecimento. O presente trabalho se propôs a popular e calibrar um banco de itens do domínio de inglês instrumental explorando técnicas sensíveis ao conteúdo do banco de itens para permitir a avaliação de varias habilidades. Atualmente, o banco possui 103 itens e estimamos que em três semestres ele vira a conter o número ideal de itens para seu uso em um teste adaptativo, um tempo razoável, dado o número de alunos do programa de pósgraduação. Adicionalmente, foram desenvolvidos um sistema de gerência desse banco e a modelagem de um sistema de avaliação adaptativa que podem ser utilizados tanto para a avaliação diagnóstica do inglês instrumental, quanto para a avaliação formal da proficiência em inglês para admissão em programas de mestrado. A modelagem foi bem detalhada para permitir uma implementação fácil do sistema, dada a dificuldade inerente à teoria estatística utilizada em testes adaptativos,The application of Computerized Adaptive Tests to many types of measurements and domains is becoming easier due to the framework provided by the Item Response Theory (IRT), the increase in power and availability of personal computers and software to perform IRT analyses. The items administered to each individual are selected in order to be the most appropriate for evaluating that individual, allowing a more eHicient, high quality assessment. A pool of test items calibrated according to TRI models allows an adequate use of adaptive testing. The main difficulties to employ adaptive testing are the need of a large-scale empirical study for item calibration and the generation of multidimensional tests, i.e., tests that address different knowledge contents] One of the objectives of this work was to populate and calibrate a test item pool for the domain of English for academic purposes. Methods that are sensitive to the content of the pool of items were exploited to allow assessment of several abilities. Currently, the item pool has 103 itens and three semesters is an estimate of the time taken for it to be ready for use in a real application. We consider this acceptable considering the number of master students of our post-graduate program. Moreover, an item management system and the modeling of an adaptive System were developed to be used as diagnostic or final assessment of English for academic purposes in proficiency exams in post-graduate programs. We have done a detailed modeling allowing an easy implementation of the adaptive testing system as the statistical theory used in the system components is very hard.Biblioteca Digitais de Teses e Dissertações da USPAluisio, Sandra MariaOliveira, Leandro Henrique Mendonça de2002-04-05info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisapplication/pdfhttps://www.teses.usp.br/teses/disponiveis/55/55134/tde-17022020-145608/reponame:Biblioteca Digital de Teses e Dissertações da USPinstname:Universidade de São Paulo (USP)instacron:USPLiberar o conteúdo para acesso público.info:eu-repo/semantics/openAccesspor2022-11-24T13:46:06Zoai:teses.usp.br:tde-17022020-145608Biblioteca Digital de Teses e Dissertaçõeshttp://www.teses.usp.br/PUBhttp://www.teses.usp.br/cgi-bin/mtd2br.plvirginia@if.usp.br|| atendimento@aguia.usp.br||virginia@if.usp.bropendoar:27212022-11-24T13:46:06Biblioteca Digital de Teses e Dissertações da USP - Universidade de São Paulo (USP)false
dc.title.none.fl_str_mv Testes adaptativos sensíveis ao conteúdo de banco de itens: uma aplicação em exames de proficiência em inglês para programas de pós-graduação
Not available
title Testes adaptativos sensíveis ao conteúdo de banco de itens: uma aplicação em exames de proficiência em inglês para programas de pós-graduação
spellingShingle Testes adaptativos sensíveis ao conteúdo de banco de itens: uma aplicação em exames de proficiência em inglês para programas de pós-graduação
Oliveira, Leandro Henrique Mendonça de
Não disponível
Not available
title_short Testes adaptativos sensíveis ao conteúdo de banco de itens: uma aplicação em exames de proficiência em inglês para programas de pós-graduação
title_full Testes adaptativos sensíveis ao conteúdo de banco de itens: uma aplicação em exames de proficiência em inglês para programas de pós-graduação
title_fullStr Testes adaptativos sensíveis ao conteúdo de banco de itens: uma aplicação em exames de proficiência em inglês para programas de pós-graduação
title_full_unstemmed Testes adaptativos sensíveis ao conteúdo de banco de itens: uma aplicação em exames de proficiência em inglês para programas de pós-graduação
title_sort Testes adaptativos sensíveis ao conteúdo de banco de itens: uma aplicação em exames de proficiência em inglês para programas de pós-graduação
author Oliveira, Leandro Henrique Mendonça de
author_facet Oliveira, Leandro Henrique Mendonça de
author_role author
dc.contributor.none.fl_str_mv Aluisio, Sandra Maria
dc.contributor.author.fl_str_mv Oliveira, Leandro Henrique Mendonça de
dc.subject.por.fl_str_mv Não disponível
Not available
topic Não disponível
Not available
description A aplicação de Testes Adaptativos Computadorizados a vários tipos de avaliações e domínios tem se tornado cada vez mais fácil devido ao suporte teórico da Teoria de Resposta de Itens (TRI), a maior disponibilidade de computadores pessoais mais potentes e ao desenvolvimento de software rodando nestes computadores nestes computadores para realizar as análises da TRI. Os testes adaptativos ajustam as suas questões ao nível de habilidade individual de cada estudante, adaptando-Se a capacidade de cada um, gerando uma avaliação mais eficiente e de maior qualidade. A existência de um banco de itens calibrado, de acordo com os modelos estatísticos da TRI, permite a administração adequada dos testes adaptativos. As principais dificuldades de implantação dos testes adaptativos são a necessidade de um estudo empírico em larga escala, envolvendo profissionais de várias áreas, para uma boa calibração do banco de itens e a geração de avaliações multidimensionais, isto é, avaliações que atendam a diferentes conteúdos de uma área do conhecimento. O presente trabalho se propôs a popular e calibrar um banco de itens do domínio de inglês instrumental explorando técnicas sensíveis ao conteúdo do banco de itens para permitir a avaliação de varias habilidades. Atualmente, o banco possui 103 itens e estimamos que em três semestres ele vira a conter o número ideal de itens para seu uso em um teste adaptativo, um tempo razoável, dado o número de alunos do programa de pósgraduação. Adicionalmente, foram desenvolvidos um sistema de gerência desse banco e a modelagem de um sistema de avaliação adaptativa que podem ser utilizados tanto para a avaliação diagnóstica do inglês instrumental, quanto para a avaliação formal da proficiência em inglês para admissão em programas de mestrado. A modelagem foi bem detalhada para permitir uma implementação fácil do sistema, dada a dificuldade inerente à teoria estatística utilizada em testes adaptativos,
publishDate 2002
dc.date.none.fl_str_mv 2002-04-05
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://www.teses.usp.br/teses/disponiveis/55/55134/tde-17022020-145608/
url https://www.teses.usp.br/teses/disponiveis/55/55134/tde-17022020-145608/
dc.language.iso.fl_str_mv por
language por
dc.relation.none.fl_str_mv
dc.rights.driver.fl_str_mv Liberar o conteúdo para acesso público.
info:eu-repo/semantics/openAccess
rights_invalid_str_mv Liberar o conteúdo para acesso público.
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.coverage.none.fl_str_mv
dc.publisher.none.fl_str_mv Biblioteca Digitais de Teses e Dissertações da USP
publisher.none.fl_str_mv Biblioteca Digitais de Teses e Dissertações da USP
dc.source.none.fl_str_mv
reponame:Biblioteca Digital de Teses e Dissertações da USP
instname:Universidade de São Paulo (USP)
instacron:USP
instname_str Universidade de São Paulo (USP)
instacron_str USP
institution USP
reponame_str Biblioteca Digital de Teses e Dissertações da USP
collection Biblioteca Digital de Teses e Dissertações da USP
repository.name.fl_str_mv Biblioteca Digital de Teses e Dissertações da USP - Universidade de São Paulo (USP)
repository.mail.fl_str_mv virginia@if.usp.br|| atendimento@aguia.usp.br||virginia@if.usp.br
_version_ 1815257091508535296