Detecção automática de doenças em frutos do mamão a partir da análise de imagens por meio de redes neurais profundas

Detalhes bibliográficos
Autor(a) principal: Moraes, Jairo Lucas de
Data de Publicação: 2023
Tipo de documento: Tese
Idioma: por
Título da fonte: Repositório Institucional da Universidade Federal do Espírito Santo (riUfes)
Texto Completo: http://repositorio.ufes.br/handle/10/17171
Resumo: Horticulture plays an essential role in the economies of various countries, serving as a significant source of income and job creation, particularly in developing nations. Within this sector, papaya holds substantial importance, being cultivated in over 60 countries, including Brazil, which stands as the second-largest producer of this fruit. Papaya is a delicate and climacteric fruit, leading to considerable post-harvest losses, underscoring the pivotal role of early detection and accurate classification of fruit injuries in quality control and loss mitigation. Presently, papaya quality control is conducted manually, demanding exhaustive and repetitive efforts, often necessitating specialized knowledge that may not always be readily available to small-scale farmers or small fruit processing facilities. Given this backdrop, the implementation of autonomous or semi-autonomous system solutions aimed at assisting in papaya quality control, including disease detection and physical damage identification, is highly desirable. Such solutions could effectively mitigate industry losses, offering a more efficient, precise, and reliable approach to ensuring fruit quality and maximizing productivity in the sector. In this thesis, we propose a comprehensive solution spanning from the creation of an unprecedented dataset in the literature to the development of a mobile application. This includes the implementation of novel convolutional neural network (CNN) architectures utilizing the Convolutional Block Attention Module (CBAM). Our dataset comprises more than 23,000 examples of eight types of injuries (Anthracnose, Phytophthora, Chocolate Spot, Sticky Disease, Black Spot, Physiological Spot, Mechanical Damage, and Scar) affecting papaya fruits, alongside examples of healthy fruits. The developed detector achieves a new state-ofthe-art in papaya fruit disease detection, with an average precision (mAP) of 86.2%. This performance significantly surpasses that of human experts, who achieved an average precision of 67.3%. Lastly, we optimized the structure and weights of our detector for use on mobile devices and created a robust mobile application that can run on common smartphones. It can detect diseases in papaya fruits at a rate of up to 6 frames per second without requiring additional resources.
id UFES_19568d81bb9f9ac0e2f031f81d1dd99c
oai_identifier_str oai:repositorio.ufes.br:10/17171
network_acronym_str UFES
network_name_str Repositório Institucional da Universidade Federal do Espírito Santo (riUfes)
repository_id_str 2108
spelling Souza, Alberto Ferreira dehttps://orcid.org/0000000315618447http://lattes.cnpq.br/7573837292080522Moraes, Jairo Lucas dehttps://orcid.org/0000-0002-5111-0811http://lattes.cnpq.br/8743832227027911França, Felipe Maia Galvãohttps://orcid.org/0000-0002-8980-6208http://lattes.cnpq.br/1097952760431187Partelli, Fabio Luizhttps://orcid.org/0000000288300846http://lattes.cnpq.br/6730543200776161Komati, Karin Satiehttps://orcid.org/0000-0001-5677-4724http://lattes.cnpq.br/9860697624155451Oliveira, Elias Silva dehttp://lattes.cnpq.br/22103560358271812024-05-30T01:42:37Z2024-05-30T01:42:37Z2023-07-14Horticulture plays an essential role in the economies of various countries, serving as a significant source of income and job creation, particularly in developing nations. Within this sector, papaya holds substantial importance, being cultivated in over 60 countries, including Brazil, which stands as the second-largest producer of this fruit. Papaya is a delicate and climacteric fruit, leading to considerable post-harvest losses, underscoring the pivotal role of early detection and accurate classification of fruit injuries in quality control and loss mitigation. Presently, papaya quality control is conducted manually, demanding exhaustive and repetitive efforts, often necessitating specialized knowledge that may not always be readily available to small-scale farmers or small fruit processing facilities. Given this backdrop, the implementation of autonomous or semi-autonomous system solutions aimed at assisting in papaya quality control, including disease detection and physical damage identification, is highly desirable. Such solutions could effectively mitigate industry losses, offering a more efficient, precise, and reliable approach to ensuring fruit quality and maximizing productivity in the sector. In this thesis, we propose a comprehensive solution spanning from the creation of an unprecedented dataset in the literature to the development of a mobile application. This includes the implementation of novel convolutional neural network (CNN) architectures utilizing the Convolutional Block Attention Module (CBAM). Our dataset comprises more than 23,000 examples of eight types of injuries (Anthracnose, Phytophthora, Chocolate Spot, Sticky Disease, Black Spot, Physiological Spot, Mechanical Damage, and Scar) affecting papaya fruits, alongside examples of healthy fruits. The developed detector achieves a new state-ofthe-art in papaya fruit disease detection, with an average precision (mAP) of 86.2%. This performance significantly surpasses that of human experts, who achieved an average precision of 67.3%. Lastly, we optimized the structure and weights of our detector for use on mobile devices and created a robust mobile application that can run on common smartphones. It can detect diseases in papaya fruits at a rate of up to 6 frames per second without requiring additional resources.A fruticultura desempenha um papel essencial na economia de várias nações, constituindo-se como uma relevante fonte de receita e um significativo gerador de empregos. Nesse setor, o mamão assume uma grande relevância, sendo cultivado em mais de 60 países, incluindo o Brasil, que detém a posição de segundo maior produtor dessa fruta. O mamão, enquanto fruto de natureza frágil e climatérica, apresenta grande suscetibilidade a perdas substanciais após a colheita, tornando crucial a avaliação de qualidade do fruto para identificação precoce de eventuais danos nos frutos. No cenário atual, a avaliação da qualidade do mamão é conduzida mediante métodos manuais, caracterizados por demandarem um esforço exaustivo e repetitivo, bem como pela necessidade de conhecimento especializado, que nem sempre se encontra à disposição de pequenos agricultores ou em instalações de processamento de frutas de menor porte. Diante da situação apresentada, a implementação de soluções baseadas em sistemas autônomos ou semiautônomos emerge como um objetivo de alta relevância para otimizar o controle de qualidade do mamão, abrangendo a detecção e identificação de doenças e de danos físicos nos frutos. Tais soluções têm o potencial de mitigar as perdas no setor, oferecendo uma abordagem mais eficaz, precisa e confiável no controle de qualidade dos frutos. Nesta tese, propomos uma solução abrangente que abarca desde a criação de um conjunto de dados inédito na literatura até o desenvolvimento de um aplicativo móvel, passando pela implementação de novas estruturas de redes neurais convolucionais (CNN) utilizando Convolutional Block Attention Module (CBAM). Nosso conjunto de dados conta com mais de 23.000 exemplos de 8 tipos de injúrias (Antracnose, Phytophthora, Mancha Chocolate, Meleira, Pinta Preta, Mancha Fisiológica, Danos Mecânicos e Cicatriz) que afetam os frutos de mamão, além de exemplos de frutos saudáveis. O detector desenvolvido alcança um novo estado-da-arte na detecção de doenças em frutos de mamão, com uma precisão média (mAP) de 86,2%. Essa performance é significativamente superior à de especialistas humanos, que obtiveram uma precisão média de 67,3%. Por fim, otimizamos a estrutura e os pesos do nosso detector para utilização em dispositivos móveis e criamos um aplicativo móvel robusto que pode ser executado em smartphones comuns e consegue detectar doenças em frutos do mamão a uma taxa de até 6 frames por segundo, sem a necessidade de qualquer recurso extra.Texthttp://repositorio.ufes.br/handle/10/17171porUniversidade Federal do Espírito SantoDoutorado em Ciência da ComputaçãoPrograma de Pós-Graduação em InformáticaUFESBRCentro Tecnológicosubject.br-rjbnCiência da ComputaçãoVisão computacional em dispositivos móveisAgricultura de precisãoDoenças em frutasAprendizado ProfundoCBAMMamãoCarica PapayaDetecção automática de doenças em frutos do mamão a partir da análise de imagens por meio de redes neurais profundastitle.alternativeinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesisinfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da Universidade Federal do Espírito Santo (riUfes)instname:Universidade Federal do Espírito Santo (UFES)instacron:UFESORIGINALJAIRO LUCAS DE MORAES.pdfapplication/pdf5773173http://repositorio.ufes.br/bitstreams/ccf1049a-086c-4c30-aed9-f4df0680b371/downloada673647dde4d362ad777817e1883a7c4MD5110/171712024-08-22 09:40:03.53oai:repositorio.ufes.br:10/17171http://repositorio.ufes.brRepositório InstitucionalPUBhttp://repositorio.ufes.br/oai/requestopendoar:21082024-10-15T18:01:17.144990Repositório Institucional da Universidade Federal do Espírito Santo (riUfes) - Universidade Federal do Espírito Santo (UFES)false
dc.title.none.fl_str_mv Detecção automática de doenças em frutos do mamão a partir da análise de imagens por meio de redes neurais profundas
dc.title.alternative.none.fl_str_mv title.alternative
title Detecção automática de doenças em frutos do mamão a partir da análise de imagens por meio de redes neurais profundas
spellingShingle Detecção automática de doenças em frutos do mamão a partir da análise de imagens por meio de redes neurais profundas
Moraes, Jairo Lucas de
Ciência da Computação
Visão computacional em dispositivos móveis
Agricultura de precisão
Doenças em frutas
Aprendizado Profundo
CBAM
Mamão
Carica Papaya
subject.br-rjbn
title_short Detecção automática de doenças em frutos do mamão a partir da análise de imagens por meio de redes neurais profundas
title_full Detecção automática de doenças em frutos do mamão a partir da análise de imagens por meio de redes neurais profundas
title_fullStr Detecção automática de doenças em frutos do mamão a partir da análise de imagens por meio de redes neurais profundas
title_full_unstemmed Detecção automática de doenças em frutos do mamão a partir da análise de imagens por meio de redes neurais profundas
title_sort Detecção automática de doenças em frutos do mamão a partir da análise de imagens por meio de redes neurais profundas
author Moraes, Jairo Lucas de
author_facet Moraes, Jairo Lucas de
author_role author
dc.contributor.authorID.none.fl_str_mv https://orcid.org/0000-0002-5111-0811
dc.contributor.authorLattes.none.fl_str_mv http://lattes.cnpq.br/8743832227027911
dc.contributor.advisor1.fl_str_mv Souza, Alberto Ferreira de
dc.contributor.advisor1ID.fl_str_mv https://orcid.org/0000000315618447
dc.contributor.advisor1Lattes.fl_str_mv http://lattes.cnpq.br/7573837292080522
dc.contributor.author.fl_str_mv Moraes, Jairo Lucas de
dc.contributor.referee1.fl_str_mv França, Felipe Maia Galvão
dc.contributor.referee1ID.fl_str_mv https://orcid.org/0000-0002-8980-6208
dc.contributor.referee1Lattes.fl_str_mv http://lattes.cnpq.br/1097952760431187
dc.contributor.referee2.fl_str_mv Partelli, Fabio Luiz
dc.contributor.referee2ID.fl_str_mv https://orcid.org/0000000288300846
dc.contributor.referee2Lattes.fl_str_mv http://lattes.cnpq.br/6730543200776161
dc.contributor.referee3.fl_str_mv Komati, Karin Satie
dc.contributor.referee3ID.fl_str_mv https://orcid.org/0000-0001-5677-4724
dc.contributor.referee3Lattes.fl_str_mv http://lattes.cnpq.br/9860697624155451
dc.contributor.referee4.fl_str_mv Oliveira, Elias Silva de
dc.contributor.referee4Lattes.fl_str_mv http://lattes.cnpq.br/2210356035827181
contributor_str_mv Souza, Alberto Ferreira de
França, Felipe Maia Galvão
Partelli, Fabio Luiz
Komati, Karin Satie
Oliveira, Elias Silva de
dc.subject.cnpq.fl_str_mv Ciência da Computação
topic Ciência da Computação
Visão computacional em dispositivos móveis
Agricultura de precisão
Doenças em frutas
Aprendizado Profundo
CBAM
Mamão
Carica Papaya
subject.br-rjbn
dc.subject.por.fl_str_mv Visão computacional em dispositivos móveis
Agricultura de precisão
Doenças em frutas
Aprendizado Profundo
CBAM
Mamão
Carica Papaya
dc.subject.br-rjbn.none.fl_str_mv subject.br-rjbn
description Horticulture plays an essential role in the economies of various countries, serving as a significant source of income and job creation, particularly in developing nations. Within this sector, papaya holds substantial importance, being cultivated in over 60 countries, including Brazil, which stands as the second-largest producer of this fruit. Papaya is a delicate and climacteric fruit, leading to considerable post-harvest losses, underscoring the pivotal role of early detection and accurate classification of fruit injuries in quality control and loss mitigation. Presently, papaya quality control is conducted manually, demanding exhaustive and repetitive efforts, often necessitating specialized knowledge that may not always be readily available to small-scale farmers or small fruit processing facilities. Given this backdrop, the implementation of autonomous or semi-autonomous system solutions aimed at assisting in papaya quality control, including disease detection and physical damage identification, is highly desirable. Such solutions could effectively mitigate industry losses, offering a more efficient, precise, and reliable approach to ensuring fruit quality and maximizing productivity in the sector. In this thesis, we propose a comprehensive solution spanning from the creation of an unprecedented dataset in the literature to the development of a mobile application. This includes the implementation of novel convolutional neural network (CNN) architectures utilizing the Convolutional Block Attention Module (CBAM). Our dataset comprises more than 23,000 examples of eight types of injuries (Anthracnose, Phytophthora, Chocolate Spot, Sticky Disease, Black Spot, Physiological Spot, Mechanical Damage, and Scar) affecting papaya fruits, alongside examples of healthy fruits. The developed detector achieves a new state-ofthe-art in papaya fruit disease detection, with an average precision (mAP) of 86.2%. This performance significantly surpasses that of human experts, who achieved an average precision of 67.3%. Lastly, we optimized the structure and weights of our detector for use on mobile devices and created a robust mobile application that can run on common smartphones. It can detect diseases in papaya fruits at a rate of up to 6 frames per second without requiring additional resources.
publishDate 2023
dc.date.issued.fl_str_mv 2023-07-14
dc.date.accessioned.fl_str_mv 2024-05-30T01:42:37Z
dc.date.available.fl_str_mv 2024-05-30T01:42:37Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/doctoralThesis
format doctoralThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://repositorio.ufes.br/handle/10/17171
url http://repositorio.ufes.br/handle/10/17171
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv Text
dc.publisher.none.fl_str_mv Universidade Federal do Espírito Santo
Doutorado em Ciência da Computação
dc.publisher.program.fl_str_mv Programa de Pós-Graduação em Informática
dc.publisher.initials.fl_str_mv UFES
dc.publisher.country.fl_str_mv BR
dc.publisher.department.fl_str_mv Centro Tecnológico
publisher.none.fl_str_mv Universidade Federal do Espírito Santo
Doutorado em Ciência da Computação
dc.source.none.fl_str_mv reponame:Repositório Institucional da Universidade Federal do Espírito Santo (riUfes)
instname:Universidade Federal do Espírito Santo (UFES)
instacron:UFES
instname_str Universidade Federal do Espírito Santo (UFES)
instacron_str UFES
institution UFES
reponame_str Repositório Institucional da Universidade Federal do Espírito Santo (riUfes)
collection Repositório Institucional da Universidade Federal do Espírito Santo (riUfes)
bitstream.url.fl_str_mv http://repositorio.ufes.br/bitstreams/ccf1049a-086c-4c30-aed9-f4df0680b371/download
bitstream.checksum.fl_str_mv a673647dde4d362ad777817e1883a7c4
bitstream.checksumAlgorithm.fl_str_mv MD5
repository.name.fl_str_mv Repositório Institucional da Universidade Federal do Espírito Santo (riUfes) - Universidade Federal do Espírito Santo (UFES)
repository.mail.fl_str_mv
_version_ 1813022569701310464