Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas
Autor(a) principal: | |
---|---|
Data de Publicação: | 2023 |
Tipo de documento: | Trabalho de conclusão de curso |
Idioma: | por |
Título da fonte: | Repositório Institucional da UFU |
Texto Completo: | https://repositorio.ufu.br/handle/123456789/41044 |
Resumo: | Trabalho de Conclusão de Curso (Graduação) |
id |
UFU_c07c791dfd30bd3677b74cdae418b2ba |
---|---|
oai_identifier_str |
oai:repositorio.ufu.br:123456789/41044 |
network_acronym_str |
UFU |
network_name_str |
Repositório Institucional da UFU |
repository_id_str |
|
spelling |
Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsasChatGPTBardInteligência artificalDetecção de fake newsProcessamento de linguagem naturalCNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAOTrabalho de Conclusão de Curso (Graduação)A disseminação de notícias falsas tornou-se uma preocupação significativa na sociedade atual. Esse problema é evidente em plataformas de mídia social, onde a propagação de desinformação se tornou uma presença constante na vida diária de muitos indivíduos. Neste trabalho, é investigado o desempenho das ferramentas GPT e Bard na classificação de notícias falsas e reais, considerando 200 artigos de jornal e duas estratégias de formulação de perguntas. Os resultados revelam que o uso de uma pergunta bem formulada é crucial para obter respostas mais precisas. Em particular, foi observado uma melhoria de 46.6% na métrica F1-Score no primeiro modelo do GPT direcionando a pergunta para focar nas características de um texto falso. No segundo modelo o F1-Score registrou uma melhoria de 22.22% para 76.68% quando o foco do prompt era nas características de uma notícia falsa. Já no Bard os resultados foram mais timídos, com um F1-Score de 40.45% já na pergunta mais específica. As descobertas apresentadas nesse estudo indicam a superioridade do GPT em relação ao Bard. Ao realizar a detecção de fake news em todos os testes a ferramenta da OpenAI foi superior à ferramenta da Google na métrica de F1-Score.Universidade Federal de UberlândiaBrasilSistemas de InformaçãoQuincozes, Silvio Erenohttp://lattes.cnpq.br/9401130360785458Rocha, Adriano Mendonçahttp://lattes.cnpq.br/9672436935373713Miani, Rodrigo Sancheshttp://lattes.cnpq.br/2992074747740327Carneiro, Murillo Guimarãeshttp://lattes.cnpq.br/8158868389973535Anjos, Lucas Sousa dos2024-01-25T15:03:44Z2024-01-25T15:03:44Z2023-11-23info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/bachelorThesisapplication/pdfANJOS, Lucas Sousa dos. Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas. 2023. 52 f. Trabalho de Conclusão de Curso (Graduação em Sistemas de Informação) - Universidade Federal de Uberlândia, Uberlândia, 2023.https://repositorio.ufu.br/handle/123456789/41044porinfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da UFUinstname:Universidade Federal de Uberlândia (UFU)instacron:UFU2024-01-26T06:19:24Zoai:repositorio.ufu.br:123456789/41044Repositório InstitucionalONGhttp://repositorio.ufu.br/oai/requestdiinf@dirbi.ufu.bropendoar:2024-01-26T06:19:24Repositório Institucional da UFU - Universidade Federal de Uberlândia (UFU)false |
dc.title.none.fl_str_mv |
Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas |
title |
Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas |
spellingShingle |
Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas Anjos, Lucas Sousa dos ChatGPT Bard Inteligência artifical Detecção de fake news Processamento de linguagem natural CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO |
title_short |
Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas |
title_full |
Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas |
title_fullStr |
Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas |
title_full_unstemmed |
Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas |
title_sort |
Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas |
author |
Anjos, Lucas Sousa dos |
author_facet |
Anjos, Lucas Sousa dos |
author_role |
author |
dc.contributor.none.fl_str_mv |
Quincozes, Silvio Ereno http://lattes.cnpq.br/9401130360785458 Rocha, Adriano Mendonça http://lattes.cnpq.br/9672436935373713 Miani, Rodrigo Sanches http://lattes.cnpq.br/2992074747740327 Carneiro, Murillo Guimarães http://lattes.cnpq.br/8158868389973535 |
dc.contributor.author.fl_str_mv |
Anjos, Lucas Sousa dos |
dc.subject.por.fl_str_mv |
ChatGPT Bard Inteligência artifical Detecção de fake news Processamento de linguagem natural CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO |
topic |
ChatGPT Bard Inteligência artifical Detecção de fake news Processamento de linguagem natural CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO |
description |
Trabalho de Conclusão de Curso (Graduação) |
publishDate |
2023 |
dc.date.none.fl_str_mv |
2023-11-23 2024-01-25T15:03:44Z 2024-01-25T15:03:44Z |
dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
dc.type.driver.fl_str_mv |
info:eu-repo/semantics/bachelorThesis |
format |
bachelorThesis |
status_str |
publishedVersion |
dc.identifier.uri.fl_str_mv |
ANJOS, Lucas Sousa dos. Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas. 2023. 52 f. Trabalho de Conclusão de Curso (Graduação em Sistemas de Informação) - Universidade Federal de Uberlândia, Uberlândia, 2023. https://repositorio.ufu.br/handle/123456789/41044 |
identifier_str_mv |
ANJOS, Lucas Sousa dos. Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas. 2023. 52 f. Trabalho de Conclusão de Curso (Graduação em Sistemas de Informação) - Universidade Federal de Uberlândia, Uberlândia, 2023. |
url |
https://repositorio.ufu.br/handle/123456789/41044 |
dc.language.iso.fl_str_mv |
por |
language |
por |
dc.rights.driver.fl_str_mv |
info:eu-repo/semantics/openAccess |
eu_rights_str_mv |
openAccess |
dc.format.none.fl_str_mv |
application/pdf |
dc.publisher.none.fl_str_mv |
Universidade Federal de Uberlândia Brasil Sistemas de Informação |
publisher.none.fl_str_mv |
Universidade Federal de Uberlândia Brasil Sistemas de Informação |
dc.source.none.fl_str_mv |
reponame:Repositório Institucional da UFU instname:Universidade Federal de Uberlândia (UFU) instacron:UFU |
instname_str |
Universidade Federal de Uberlândia (UFU) |
instacron_str |
UFU |
institution |
UFU |
reponame_str |
Repositório Institucional da UFU |
collection |
Repositório Institucional da UFU |
repository.name.fl_str_mv |
Repositório Institucional da UFU - Universidade Federal de Uberlândia (UFU) |
repository.mail.fl_str_mv |
diinf@dirbi.ufu.br |
_version_ |
1813711541832253440 |