Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas

Detalhes bibliográficos
Autor(a) principal: Anjos, Lucas Sousa dos
Data de Publicação: 2023
Tipo de documento: Trabalho de conclusão de curso
Idioma: por
Título da fonte: Repositório Institucional da UFU
Texto Completo: https://repositorio.ufu.br/handle/123456789/41044
Resumo: Trabalho de Conclusão de Curso (Graduação)
id UFU_c07c791dfd30bd3677b74cdae418b2ba
oai_identifier_str oai:repositorio.ufu.br:123456789/41044
network_acronym_str UFU
network_name_str Repositório Institucional da UFU
repository_id_str
spelling Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsasChatGPTBardInteligência artificalDetecção de fake newsProcessamento de linguagem naturalCNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAOTrabalho de Conclusão de Curso (Graduação)A disseminação de notícias falsas tornou-se uma preocupação significativa na sociedade atual. Esse problema é evidente em plataformas de mídia social, onde a propagação de desinformação se tornou uma presença constante na vida diária de muitos indivíduos. Neste trabalho, é investigado o desempenho das ferramentas GPT e Bard na classificação de notícias falsas e reais, considerando 200 artigos de jornal e duas estratégias de formulação de perguntas. Os resultados revelam que o uso de uma pergunta bem formulada é crucial para obter respostas mais precisas. Em particular, foi observado uma melhoria de 46.6% na métrica F1-Score no primeiro modelo do GPT direcionando a pergunta para focar nas características de um texto falso. No segundo modelo o F1-Score registrou uma melhoria de 22.22% para 76.68% quando o foco do prompt era nas características de uma notícia falsa. Já no Bard os resultados foram mais timídos, com um F1-Score de 40.45% já na pergunta mais específica. As descobertas apresentadas nesse estudo indicam a superioridade do GPT em relação ao Bard. Ao realizar a detecção de fake news em todos os testes a ferramenta da OpenAI foi superior à ferramenta da Google na métrica de F1-Score.Universidade Federal de UberlândiaBrasilSistemas de InformaçãoQuincozes, Silvio Erenohttp://lattes.cnpq.br/9401130360785458Rocha, Adriano Mendonçahttp://lattes.cnpq.br/9672436935373713Miani, Rodrigo Sancheshttp://lattes.cnpq.br/2992074747740327Carneiro, Murillo Guimarãeshttp://lattes.cnpq.br/8158868389973535Anjos, Lucas Sousa dos2024-01-25T15:03:44Z2024-01-25T15:03:44Z2023-11-23info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/bachelorThesisapplication/pdfANJOS, Lucas Sousa dos. Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas. 2023. 52 f. Trabalho de Conclusão de Curso (Graduação em Sistemas de Informação) - Universidade Federal de Uberlândia, Uberlândia, 2023.https://repositorio.ufu.br/handle/123456789/41044porinfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da UFUinstname:Universidade Federal de Uberlândia (UFU)instacron:UFU2024-01-26T06:19:24Zoai:repositorio.ufu.br:123456789/41044Repositório InstitucionalONGhttp://repositorio.ufu.br/oai/requestdiinf@dirbi.ufu.bropendoar:2024-01-26T06:19:24Repositório Institucional da UFU - Universidade Federal de Uberlândia (UFU)false
dc.title.none.fl_str_mv Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas
title Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas
spellingShingle Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas
Anjos, Lucas Sousa dos
ChatGPT
Bard
Inteligência artifical
Detecção de fake news
Processamento de linguagem natural
CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO
title_short Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas
title_full Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas
title_fullStr Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas
title_full_unstemmed Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas
title_sort Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas
author Anjos, Lucas Sousa dos
author_facet Anjos, Lucas Sousa dos
author_role author
dc.contributor.none.fl_str_mv Quincozes, Silvio Ereno
http://lattes.cnpq.br/9401130360785458
Rocha, Adriano Mendonça
http://lattes.cnpq.br/9672436935373713
Miani, Rodrigo Sanches
http://lattes.cnpq.br/2992074747740327
Carneiro, Murillo Guimarães
http://lattes.cnpq.br/8158868389973535
dc.contributor.author.fl_str_mv Anjos, Lucas Sousa dos
dc.subject.por.fl_str_mv ChatGPT
Bard
Inteligência artifical
Detecção de fake news
Processamento de linguagem natural
CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO
topic ChatGPT
Bard
Inteligência artifical
Detecção de fake news
Processamento de linguagem natural
CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO
description Trabalho de Conclusão de Curso (Graduação)
publishDate 2023
dc.date.none.fl_str_mv 2023-11-23
2024-01-25T15:03:44Z
2024-01-25T15:03:44Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/bachelorThesis
format bachelorThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv ANJOS, Lucas Sousa dos. Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas. 2023. 52 f. Trabalho de Conclusão de Curso (Graduação em Sistemas de Informação) - Universidade Federal de Uberlândia, Uberlândia, 2023.
https://repositorio.ufu.br/handle/123456789/41044
identifier_str_mv ANJOS, Lucas Sousa dos. Análise experimental do desempenho de grandes modelos de linguagens na detecção de notícias falsas. 2023. 52 f. Trabalho de Conclusão de Curso (Graduação em Sistemas de Informação) - Universidade Federal de Uberlândia, Uberlândia, 2023.
url https://repositorio.ufu.br/handle/123456789/41044
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Universidade Federal de Uberlândia
Brasil
Sistemas de Informação
publisher.none.fl_str_mv Universidade Federal de Uberlândia
Brasil
Sistemas de Informação
dc.source.none.fl_str_mv reponame:Repositório Institucional da UFU
instname:Universidade Federal de Uberlândia (UFU)
instacron:UFU
instname_str Universidade Federal de Uberlândia (UFU)
instacron_str UFU
institution UFU
reponame_str Repositório Institucional da UFU
collection Repositório Institucional da UFU
repository.name.fl_str_mv Repositório Institucional da UFU - Universidade Federal de Uberlândia (UFU)
repository.mail.fl_str_mv diinf@dirbi.ufu.br
_version_ 1813711541832253440