Subjetividade em correção de redações: deteçcão automática através de léxico de operadores de viés linguístico

Detalhes bibliográficos
Autor(a) principal: Márcia cançado
Data de Publicação: 2020
Outros Autores: Luana Amaral, Evelin Carvalho Freire de Amorim, Adriano Veloso, Heliana Mello
Tipo de documento: Artigo
Idioma: por
Título da fonte: Repositório Institucional da UFMG
Texto Completo: https://doi.org/10.21814/lm.12.1.313
http://hdl.handle.net/1843/51410
https://orcid.org/0000-0002-4159-3661
https://orcid.org/0000-0002-4290-1208
https://orcid.org/0000-0003-1343-939X
https://orcid.org/0000-0002-9177-4954
https://orcid.org/0000-0003-0267-9005
Resumo: As redações são instrumentos avaliativos muito importantes para os estudantes brasileiros. Mesmo que seja assumido que a subjetividade esteja presente em todo e qualquer texto, espera-se que as correções dessas redações sejam feitas com o mínimo de subjetividade possível. Entretanto, a partir da análise de uma amostra de correções de redação, percebemos um alto grau de subjetividade nesses textos. Baseados nessa pré-análise, feita de forma manual, levantamos a hipótese de que o gênero “correção de redação” ´e mais subjetivo do que se esperaria. Para corroborar essa hipótese, elaboramos uma lista de operadores linguísticos, marcadores de viés, dividida em quatro categorias: operadores argumentativos, operadores de pressuposição, operadores de modalidade e operadores de opinião e valoração. Essa lista foi aplicada, através de uma metodologia de detecção automática de linguagem enviesada, a um corpus de correções de redação. A partir disso, quantificamos os operadores de viés presentes nesses textos. Foram também analisados esses operadores de viés em dois outros corpora: de resumos acadêmicos e de resenhas de produtos publicadas em sites de vendas na internet. A ideia dessa análise foi compararmos a distribuição dessas marcas de viés nas correções de redação e em gêneros reconhecidamente menos subjetivos (resumos acadêmicos) e reconhecidamente mais subjetivos (resenhas). Para tal comparação, lançamos mão de uma ferramenta estatística muito utilizada na análise de comparação de dados, os complots. Os nossos resultados mostraram que a distribuição de operadores de viés linguístico nas correções de redação se aproxima mais da distribuição desses itens em resenhas do que em resumos acadêmicos. Isso corrobora nossa hipótese e indica que o grau de subjetividade das correções ´e alto, estando mais próximo do grau de subjetividade de um texto como as resenhas. Concluímos, portanto, que essas correções refletem pontos de vista do corretor, que se afastam dos critérios de correção, o que coloca duvidas sobre a consideração desse gênero como um instrumento avaliador isento e justo.
id UFMG_4a680a4502515de0db725308004dce13
oai_identifier_str oai:repositorio.ufmg.br:1843/51410
network_acronym_str UFMG
network_name_str Repositório Institucional da UFMG
repository_id_str
spelling 2023-03-30T20:55:42Z2023-03-30T20:55:42Z20201216379https://doi.org/10.21814/lm.12.1.31316470818http://hdl.handle.net/1843/51410https://orcid.org/0000-0002-4159-3661https://orcid.org/0000-0002-4290-1208https://orcid.org/0000-0003-1343-939Xhttps://orcid.org/0000-0002-9177-4954https://orcid.org/0000-0003-0267-9005As redações são instrumentos avaliativos muito importantes para os estudantes brasileiros. Mesmo que seja assumido que a subjetividade esteja presente em todo e qualquer texto, espera-se que as correções dessas redações sejam feitas com o mínimo de subjetividade possível. Entretanto, a partir da análise de uma amostra de correções de redação, percebemos um alto grau de subjetividade nesses textos. Baseados nessa pré-análise, feita de forma manual, levantamos a hipótese de que o gênero “correção de redação” ´e mais subjetivo do que se esperaria. Para corroborar essa hipótese, elaboramos uma lista de operadores linguísticos, marcadores de viés, dividida em quatro categorias: operadores argumentativos, operadores de pressuposição, operadores de modalidade e operadores de opinião e valoração. Essa lista foi aplicada, através de uma metodologia de detecção automática de linguagem enviesada, a um corpus de correções de redação. A partir disso, quantificamos os operadores de viés presentes nesses textos. Foram também analisados esses operadores de viés em dois outros corpora: de resumos acadêmicos e de resenhas de produtos publicadas em sites de vendas na internet. A ideia dessa análise foi compararmos a distribuição dessas marcas de viés nas correções de redação e em gêneros reconhecidamente menos subjetivos (resumos acadêmicos) e reconhecidamente mais subjetivos (resenhas). Para tal comparação, lançamos mão de uma ferramenta estatística muito utilizada na análise de comparação de dados, os complots. Os nossos resultados mostraram que a distribuição de operadores de viés linguístico nas correções de redação se aproxima mais da distribuição desses itens em resenhas do que em resumos acadêmicos. Isso corrobora nossa hipótese e indica que o grau de subjetividade das correções ´e alto, estando mais próximo do grau de subjetividade de um texto como as resenhas. Concluímos, portanto, que essas correções refletem pontos de vista do corretor, que se afastam dos critérios de correção, o que coloca duvidas sobre a consideração desse gênero como um instrumento avaliador isento e justo.Essays are very important assessment tools for Brazilian students. Therefore, it is expected that the grading of these texts will be made with as little subjectivity as possible. However, in an analysis of a sample of grading sheet comments by evaluators, we have noticed a high degree of subjectivity in these texts. From this first analysis, carried manually, we proposed the hypothesis that this genre is more subjective than one would expect. In order to corroborate this hypothesis, we have drawn up a list of linguistic bias markers, divided into four categories: argumentative operators, presupposition operators, modalization operators, and opinion and value operators. This list was applied to a corpus of essay grading sheet comments by evaluators, using an automatic language bias detection methodology. From this, we were able to quantify the linguistic bias markers present in these texts. These bias markers were also analyzed in two other corpora: abstracts and product reviews published on internet sales sites. We have compared the percentage of these markers in evaluators’ comments with the percentage numbers of these markers in genres admittedly less subjective (abstracts) and admittedly more subjective (reviews). For such comparison, we have used boxplots, a statistical tool widely used in data comparison analysis. Our results indicated that the grading sheets, as for the number of bias markers, are closer to more subjective texts than to less subjective texts. This corroborates our hypothesis and indicates that these grading sheets present a high degree of subjectivity, closer to the degree of a more subjective text. Thus, we conclude that these grading sheets reflect the personal views of the evaluator, deviating from the correction criteria, which raises doubts about considering this genre an exempt and fair assessment instrument.porUniversidade Federal de Minas GeraisUFMGBrasilFALE - FACULDADE DE LETRASLinguamáticaSubjetividadeCorreção de redaçãoSubjetividadeLéxico de operador de viésDetecção automáticaSubjetividade em correção de redações: deteçcão automática através de léxico de operadores de viés linguísticoSubjectivity in essay grading: automatic detection through language bias operator lexiconinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/articlehttps://linguamatica.com/index.php/linguamatica/article/view/313Márcia cançadoLuana AmaralEvelin Carvalho Freire de AmorimAdriano VelosoHeliana Melloapplication/pdfinfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da UFMGinstname:Universidade Federal de Minas Gerais (UFMG)instacron:UFMGLICENSELicense.txtLicense.txttext/plain; charset=utf-82042https://repositorio.ufmg.br/bitstream/1843/51410/1/License.txtfa505098d172de0bc8864fc1287ffe22MD51ORIGINALSubjetividade em corre¸cao de reda¸coes detec¸cao automatica.pdfSubjetividade em corre¸cao de reda¸coes detec¸cao automatica.pdfapplication/pdf1324005https://repositorio.ufmg.br/bitstream/1843/51410/2/Subjetividade%20em%20corre%c2%b8cao%20de%20reda%c2%b8coes%20detec%c2%b8cao%20automatica.pdf0ccf1ccfced286221eef4093a586ae87MD521843/514102023-03-30 17:55:42.806oai:repositorio.ufmg.br:1843/51410TElDRU7vv71BIERFIERJU1RSSUJVSe+/ve+/vU8gTu+/vU8tRVhDTFVTSVZBIERPIFJFUE9TSVTvv71SSU8gSU5TVElUVUNJT05BTCBEQSBVRk1HCiAKCkNvbSBhIGFwcmVzZW50Ye+/ve+/vW8gZGVzdGEgbGljZW7vv71hLCB2b2Pvv70gKG8gYXV0b3IgKGVzKSBvdSBvIHRpdHVsYXIgZG9zIGRpcmVpdG9zIGRlIGF1dG9yKSBjb25jZWRlIGFvIFJlcG9zaXTvv71yaW8gSW5zdGl0dWNpb25hbCBkYSBVRk1HIChSSS1VRk1HKSBvIGRpcmVpdG8gbu+/vW8gZXhjbHVzaXZvIGUgaXJyZXZvZ++/vXZlbCBkZSByZXByb2R1emlyIGUvb3UgZGlzdHJpYnVpciBhIHN1YSBwdWJsaWNh77+977+9byAoaW5jbHVpbmRvIG8gcmVzdW1vKSBwb3IgdG9kbyBvIG11bmRvIG5vIGZvcm1hdG8gaW1wcmVzc28gZSBlbGV0cu+/vW5pY28gZSBlbSBxdWFscXVlciBtZWlvLCBpbmNsdWluZG8gb3MgZm9ybWF0b3Mg77+9dWRpbyBvdSB277+9ZGVvLgoKVm9j77+9IGRlY2xhcmEgcXVlIGNvbmhlY2UgYSBwb2zvv710aWNhIGRlIGNvcHlyaWdodCBkYSBlZGl0b3JhIGRvIHNldSBkb2N1bWVudG8gZSBxdWUgY29uaGVjZSBlIGFjZWl0YSBhcyBEaXJldHJpemVzIGRvIFJJLVVGTUcuCgpWb2Pvv70gY29uY29yZGEgcXVlIG8gUmVwb3NpdO+/vXJpbyBJbnN0aXR1Y2lvbmFsIGRhIFVGTUcgcG9kZSwgc2VtIGFsdGVyYXIgbyBjb250Ze+/vWRvLCB0cmFuc3BvciBhIHN1YSBwdWJsaWNh77+977+9byBwYXJhIHF1YWxxdWVyIG1laW8gb3UgZm9ybWF0byBwYXJhIGZpbnMgZGUgcHJlc2VydmHvv73vv71vLgoKVm9j77+9IHRhbWLvv71tIGNvbmNvcmRhIHF1ZSBvIFJlcG9zaXTvv71yaW8gSW5zdGl0dWNpb25hbCBkYSBVRk1HIHBvZGUgbWFudGVyIG1haXMgZGUgdW1hIGPvv71waWEgZGUgc3VhIHB1YmxpY2Hvv73vv71vIHBhcmEgZmlucyBkZSBzZWd1cmFu77+9YSwgYmFjay11cCBlIHByZXNlcnZh77+977+9by4KClZvY++/vSBkZWNsYXJhIHF1ZSBhIHN1YSBwdWJsaWNh77+977+9byDvv70gb3JpZ2luYWwgZSBxdWUgdm9j77+9IHRlbSBvIHBvZGVyIGRlIGNvbmNlZGVyIG9zIGRpcmVpdG9zIGNvbnRpZG9zIG5lc3RhIGxpY2Vu77+9YS4gVm9j77+9IHRhbWLvv71tIGRlY2xhcmEgcXVlIG8gZGVw77+9c2l0byBkZSBzdWEgcHVibGljYe+/ve+/vW8gbu+/vW8sIHF1ZSBzZWphIGRlIHNldSBjb25oZWNpbWVudG8sIGluZnJpbmdlIGRpcmVpdG9zIGF1dG9yYWlzIGRlIG5pbmd177+9bS4KCkNhc28gYSBzdWEgcHVibGljYe+/ve+/vW8gY29udGVuaGEgbWF0ZXJpYWwgcXVlIHZvY++/vSBu77+9byBwb3NzdWkgYSB0aXR1bGFyaWRhZGUgZG9zIGRpcmVpdG9zIGF1dG9yYWlzLCB2b2Pvv70gZGVjbGFyYSBxdWUgb2J0ZXZlIGEgcGVybWlzc++/vW8gaXJyZXN0cml0YSBkbyBkZXRlbnRvciBkb3MgZGlyZWl0b3MgYXV0b3JhaXMgcGFyYSBjb25jZWRlciBhbyBSZXBvc2l077+9cmlvIEluc3RpdHVjaW9uYWwgZGEgVUZNRyBvcyBkaXJlaXRvcyBhcHJlc2VudGFkb3MgbmVzdGEgbGljZW7vv71hLCBlIHF1ZSBlc3NlIG1hdGVyaWFsIGRlIHByb3ByaWVkYWRlIGRlIHRlcmNlaXJvcyBlc3Tvv70gY2xhcmFtZW50ZSBpZGVudGlmaWNhZG8gZSByZWNvbmhlY2lkbyBubyB0ZXh0byBvdSBubyBjb250Ze+/vWRvIGRhIHB1YmxpY2Hvv73vv71vIG9yYSBkZXBvc2l0YWRhLgoKQ0FTTyBBIFBVQkxJQ0Hvv73vv71PIE9SQSBERVBPU0lUQURBIFRFTkhBIFNJRE8gUkVTVUxUQURPIERFIFVNIFBBVFJPQ++/vU5JTyBPVSBBUE9JTyBERSBVTUEgQUfvv71OQ0lBIERFIEZPTUVOVE8gT1UgT1VUUk8gT1JHQU5JU01PLCBWT0Pvv70gREVDTEFSQSBRVUUgUkVTUEVJVE9VIFRPRE9TIEUgUVVBSVNRVUVSIERJUkVJVE9TIERFIFJFVklT77+9TyBDT01PIFRBTULvv71NIEFTIERFTUFJUyBPQlJJR0Hvv73vv71FUyBFWElHSURBUyBQT1IgQ09OVFJBVE8gT1UgQUNPUkRPLgoKTyBSZXBvc2l077+9cmlvIEluc3RpdHVjaW9uYWwgZGEgVUZNRyBzZSBjb21wcm9tZXRlIGEgaWRlbnRpZmljYXIgY2xhcmFtZW50ZSBvIHNldSBub21lKHMpIG91IG8ocykgbm9tZXMocykgZG8ocykgZGV0ZW50b3IoZXMpIGRvcyBkaXJlaXRvcyBhdXRvcmFpcyBkYSBwdWJsaWNh77+977+9bywgZSBu77+9byBmYXLvv70gcXVhbHF1ZXIgYWx0ZXJh77+977+9bywgYWzvv71tIGRhcXVlbGFzIGNvbmNlZGlkYXMgcG9yIGVzdGEgbGljZW7vv71hLgo=Repositório de PublicaçõesPUBhttps://repositorio.ufmg.br/oaiopendoar:2023-03-30T20:55:42Repositório Institucional da UFMG - Universidade Federal de Minas Gerais (UFMG)false
dc.title.pt_BR.fl_str_mv Subjetividade em correção de redações: deteçcão automática através de léxico de operadores de viés linguístico
dc.title.alternative.pt_BR.fl_str_mv Subjectivity in essay grading: automatic detection through language bias operator lexicon
title Subjetividade em correção de redações: deteçcão automática através de léxico de operadores de viés linguístico
spellingShingle Subjetividade em correção de redações: deteçcão automática através de léxico de operadores de viés linguístico
Márcia cançado
Correção de redação
Subjetividade
Léxico de operador de viés
Detecção automática
Subjetividade
title_short Subjetividade em correção de redações: deteçcão automática através de léxico de operadores de viés linguístico
title_full Subjetividade em correção de redações: deteçcão automática através de léxico de operadores de viés linguístico
title_fullStr Subjetividade em correção de redações: deteçcão automática através de léxico de operadores de viés linguístico
title_full_unstemmed Subjetividade em correção de redações: deteçcão automática através de léxico de operadores de viés linguístico
title_sort Subjetividade em correção de redações: deteçcão automática através de léxico de operadores de viés linguístico
author Márcia cançado
author_facet Márcia cançado
Luana Amaral
Evelin Carvalho Freire de Amorim
Adriano Veloso
Heliana Mello
author_role author
author2 Luana Amaral
Evelin Carvalho Freire de Amorim
Adriano Veloso
Heliana Mello
author2_role author
author
author
author
dc.contributor.author.fl_str_mv Márcia cançado
Luana Amaral
Evelin Carvalho Freire de Amorim
Adriano Veloso
Heliana Mello
dc.subject.por.fl_str_mv Correção de redação
Subjetividade
Léxico de operador de viés
Detecção automática
topic Correção de redação
Subjetividade
Léxico de operador de viés
Detecção automática
Subjetividade
dc.subject.other.pt_BR.fl_str_mv Subjetividade
description As redações são instrumentos avaliativos muito importantes para os estudantes brasileiros. Mesmo que seja assumido que a subjetividade esteja presente em todo e qualquer texto, espera-se que as correções dessas redações sejam feitas com o mínimo de subjetividade possível. Entretanto, a partir da análise de uma amostra de correções de redação, percebemos um alto grau de subjetividade nesses textos. Baseados nessa pré-análise, feita de forma manual, levantamos a hipótese de que o gênero “correção de redação” ´e mais subjetivo do que se esperaria. Para corroborar essa hipótese, elaboramos uma lista de operadores linguísticos, marcadores de viés, dividida em quatro categorias: operadores argumentativos, operadores de pressuposição, operadores de modalidade e operadores de opinião e valoração. Essa lista foi aplicada, através de uma metodologia de detecção automática de linguagem enviesada, a um corpus de correções de redação. A partir disso, quantificamos os operadores de viés presentes nesses textos. Foram também analisados esses operadores de viés em dois outros corpora: de resumos acadêmicos e de resenhas de produtos publicadas em sites de vendas na internet. A ideia dessa análise foi compararmos a distribuição dessas marcas de viés nas correções de redação e em gêneros reconhecidamente menos subjetivos (resumos acadêmicos) e reconhecidamente mais subjetivos (resenhas). Para tal comparação, lançamos mão de uma ferramenta estatística muito utilizada na análise de comparação de dados, os complots. Os nossos resultados mostraram que a distribuição de operadores de viés linguístico nas correções de redação se aproxima mais da distribuição desses itens em resenhas do que em resumos acadêmicos. Isso corrobora nossa hipótese e indica que o grau de subjetividade das correções ´e alto, estando mais próximo do grau de subjetividade de um texto como as resenhas. Concluímos, portanto, que essas correções refletem pontos de vista do corretor, que se afastam dos critérios de correção, o que coloca duvidas sobre a consideração desse gênero como um instrumento avaliador isento e justo.
publishDate 2020
dc.date.issued.fl_str_mv 2020
dc.date.accessioned.fl_str_mv 2023-03-30T20:55:42Z
dc.date.available.fl_str_mv 2023-03-30T20:55:42Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/article
format article
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://hdl.handle.net/1843/51410
dc.identifier.doi.pt_BR.fl_str_mv https://doi.org/10.21814/lm.12.1.313
dc.identifier.issn.pt_BR.fl_str_mv 16470818
dc.identifier.orcid.pt_BR.fl_str_mv https://orcid.org/0000-0002-4159-3661
https://orcid.org/0000-0002-4290-1208
https://orcid.org/0000-0003-1343-939X
https://orcid.org/0000-0002-9177-4954
https://orcid.org/0000-0003-0267-9005
url https://doi.org/10.21814/lm.12.1.313
http://hdl.handle.net/1843/51410
https://orcid.org/0000-0002-4159-3661
https://orcid.org/0000-0002-4290-1208
https://orcid.org/0000-0003-1343-939X
https://orcid.org/0000-0002-9177-4954
https://orcid.org/0000-0003-0267-9005
identifier_str_mv 16470818
dc.language.iso.fl_str_mv por
language por
dc.relation.ispartof.pt_BR.fl_str_mv Linguamática
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Universidade Federal de Minas Gerais
dc.publisher.initials.fl_str_mv UFMG
dc.publisher.country.fl_str_mv Brasil
dc.publisher.department.fl_str_mv FALE - FACULDADE DE LETRAS
publisher.none.fl_str_mv Universidade Federal de Minas Gerais
dc.source.none.fl_str_mv reponame:Repositório Institucional da UFMG
instname:Universidade Federal de Minas Gerais (UFMG)
instacron:UFMG
instname_str Universidade Federal de Minas Gerais (UFMG)
instacron_str UFMG
institution UFMG
reponame_str Repositório Institucional da UFMG
collection Repositório Institucional da UFMG
bitstream.url.fl_str_mv https://repositorio.ufmg.br/bitstream/1843/51410/1/License.txt
https://repositorio.ufmg.br/bitstream/1843/51410/2/Subjetividade%20em%20corre%c2%b8cao%20de%20reda%c2%b8coes%20detec%c2%b8cao%20automatica.pdf
bitstream.checksum.fl_str_mv fa505098d172de0bc8864fc1287ffe22
0ccf1ccfced286221eef4093a586ae87
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
repository.name.fl_str_mv Repositório Institucional da UFMG - Universidade Federal de Minas Gerais (UFMG)
repository.mail.fl_str_mv
_version_ 1797971382185754624