Detecção automática de doenças em frutos do mamão a partir da análise de imagens por meio de redes neurais profundas
Autor(a) principal: | |
---|---|
Data de Publicação: | 2023 |
Tipo de documento: | Tese |
Idioma: | por |
Título da fonte: | Repositório Institucional da Universidade Federal do Espírito Santo (riUfes) |
Texto Completo: | http://repositorio.ufes.br/handle/10/17171 |
Resumo: | Horticulture plays an essential role in the economies of various countries, serving as a significant source of income and job creation, particularly in developing nations. Within this sector, papaya holds substantial importance, being cultivated in over 60 countries, including Brazil, which stands as the second-largest producer of this fruit. Papaya is a delicate and climacteric fruit, leading to considerable post-harvest losses, underscoring the pivotal role of early detection and accurate classification of fruit injuries in quality control and loss mitigation. Presently, papaya quality control is conducted manually, demanding exhaustive and repetitive efforts, often necessitating specialized knowledge that may not always be readily available to small-scale farmers or small fruit processing facilities. Given this backdrop, the implementation of autonomous or semi-autonomous system solutions aimed at assisting in papaya quality control, including disease detection and physical damage identification, is highly desirable. Such solutions could effectively mitigate industry losses, offering a more efficient, precise, and reliable approach to ensuring fruit quality and maximizing productivity in the sector. In this thesis, we propose a comprehensive solution spanning from the creation of an unprecedented dataset in the literature to the development of a mobile application. This includes the implementation of novel convolutional neural network (CNN) architectures utilizing the Convolutional Block Attention Module (CBAM). Our dataset comprises more than 23,000 examples of eight types of injuries (Anthracnose, Phytophthora, Chocolate Spot, Sticky Disease, Black Spot, Physiological Spot, Mechanical Damage, and Scar) affecting papaya fruits, alongside examples of healthy fruits. The developed detector achieves a new state-ofthe-art in papaya fruit disease detection, with an average precision (mAP) of 86.2%. This performance significantly surpasses that of human experts, who achieved an average precision of 67.3%. Lastly, we optimized the structure and weights of our detector for use on mobile devices and created a robust mobile application that can run on common smartphones. It can detect diseases in papaya fruits at a rate of up to 6 frames per second without requiring additional resources. |
id |
UFES_19568d81bb9f9ac0e2f031f81d1dd99c |
---|---|
oai_identifier_str |
oai:repositorio.ufes.br:10/17171 |
network_acronym_str |
UFES |
network_name_str |
Repositório Institucional da Universidade Federal do Espírito Santo (riUfes) |
repository_id_str |
2108 |
spelling |
Souza, Alberto Ferreira dehttps://orcid.org/0000000315618447http://lattes.cnpq.br/7573837292080522Moraes, Jairo Lucas dehttps://orcid.org/0000-0002-5111-0811http://lattes.cnpq.br/8743832227027911França, Felipe Maia Galvãohttps://orcid.org/0000-0002-8980-6208http://lattes.cnpq.br/1097952760431187Partelli, Fabio Luizhttps://orcid.org/0000000288300846http://lattes.cnpq.br/6730543200776161Komati, Karin Satiehttps://orcid.org/0000-0001-5677-4724http://lattes.cnpq.br/9860697624155451Oliveira, Elias Silva dehttp://lattes.cnpq.br/22103560358271812024-05-30T01:42:37Z2024-05-30T01:42:37Z2023-07-14Horticulture plays an essential role in the economies of various countries, serving as a significant source of income and job creation, particularly in developing nations. Within this sector, papaya holds substantial importance, being cultivated in over 60 countries, including Brazil, which stands as the second-largest producer of this fruit. Papaya is a delicate and climacteric fruit, leading to considerable post-harvest losses, underscoring the pivotal role of early detection and accurate classification of fruit injuries in quality control and loss mitigation. Presently, papaya quality control is conducted manually, demanding exhaustive and repetitive efforts, often necessitating specialized knowledge that may not always be readily available to small-scale farmers or small fruit processing facilities. Given this backdrop, the implementation of autonomous or semi-autonomous system solutions aimed at assisting in papaya quality control, including disease detection and physical damage identification, is highly desirable. Such solutions could effectively mitigate industry losses, offering a more efficient, precise, and reliable approach to ensuring fruit quality and maximizing productivity in the sector. In this thesis, we propose a comprehensive solution spanning from the creation of an unprecedented dataset in the literature to the development of a mobile application. This includes the implementation of novel convolutional neural network (CNN) architectures utilizing the Convolutional Block Attention Module (CBAM). Our dataset comprises more than 23,000 examples of eight types of injuries (Anthracnose, Phytophthora, Chocolate Spot, Sticky Disease, Black Spot, Physiological Spot, Mechanical Damage, and Scar) affecting papaya fruits, alongside examples of healthy fruits. The developed detector achieves a new state-ofthe-art in papaya fruit disease detection, with an average precision (mAP) of 86.2%. This performance significantly surpasses that of human experts, who achieved an average precision of 67.3%. Lastly, we optimized the structure and weights of our detector for use on mobile devices and created a robust mobile application that can run on common smartphones. It can detect diseases in papaya fruits at a rate of up to 6 frames per second without requiring additional resources.A fruticultura desempenha um papel essencial na economia de várias nações, constituindo-se como uma relevante fonte de receita e um significativo gerador de empregos. Nesse setor, o mamão assume uma grande relevância, sendo cultivado em mais de 60 países, incluindo o Brasil, que detém a posição de segundo maior produtor dessa fruta. O mamão, enquanto fruto de natureza frágil e climatérica, apresenta grande suscetibilidade a perdas substanciais após a colheita, tornando crucial a avaliação de qualidade do fruto para identificação precoce de eventuais danos nos frutos. No cenário atual, a avaliação da qualidade do mamão é conduzida mediante métodos manuais, caracterizados por demandarem um esforço exaustivo e repetitivo, bem como pela necessidade de conhecimento especializado, que nem sempre se encontra à disposição de pequenos agricultores ou em instalações de processamento de frutas de menor porte. Diante da situação apresentada, a implementação de soluções baseadas em sistemas autônomos ou semiautônomos emerge como um objetivo de alta relevância para otimizar o controle de qualidade do mamão, abrangendo a detecção e identificação de doenças e de danos físicos nos frutos. Tais soluções têm o potencial de mitigar as perdas no setor, oferecendo uma abordagem mais eficaz, precisa e confiável no controle de qualidade dos frutos. Nesta tese, propomos uma solução abrangente que abarca desde a criação de um conjunto de dados inédito na literatura até o desenvolvimento de um aplicativo móvel, passando pela implementação de novas estruturas de redes neurais convolucionais (CNN) utilizando Convolutional Block Attention Module (CBAM). Nosso conjunto de dados conta com mais de 23.000 exemplos de 8 tipos de injúrias (Antracnose, Phytophthora, Mancha Chocolate, Meleira, Pinta Preta, Mancha Fisiológica, Danos Mecânicos e Cicatriz) que afetam os frutos de mamão, além de exemplos de frutos saudáveis. O detector desenvolvido alcança um novo estado-da-arte na detecção de doenças em frutos de mamão, com uma precisão média (mAP) de 86,2%. Essa performance é significativamente superior à de especialistas humanos, que obtiveram uma precisão média de 67,3%. Por fim, otimizamos a estrutura e os pesos do nosso detector para utilização em dispositivos móveis e criamos um aplicativo móvel robusto que pode ser executado em smartphones comuns e consegue detectar doenças em frutos do mamão a uma taxa de até 6 frames por segundo, sem a necessidade de qualquer recurso extra.Texthttp://repositorio.ufes.br/handle/10/17171porUniversidade Federal do Espírito SantoDoutorado em Ciência da ComputaçãoPrograma de Pós-Graduação em InformáticaUFESBRCentro Tecnológicosubject.br-rjbnCiência da ComputaçãoVisão computacional em dispositivos móveisAgricultura de precisãoDoenças em frutasAprendizado ProfundoCBAMMamãoCarica PapayaDetecção automática de doenças em frutos do mamão a partir da análise de imagens por meio de redes neurais profundastitle.alternativeinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesisinfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da Universidade Federal do Espírito Santo (riUfes)instname:Universidade Federal do Espírito Santo (UFES)instacron:UFESORIGINALJAIRO LUCAS DE MORAES.pdfapplication/pdf5773173http://repositorio.ufes.br/bitstreams/ccf1049a-086c-4c30-aed9-f4df0680b371/downloada673647dde4d362ad777817e1883a7c4MD5110/171712024-08-22 09:40:03.53oai:repositorio.ufes.br:10/17171http://repositorio.ufes.brRepositório InstitucionalPUBhttp://repositorio.ufes.br/oai/requestopendoar:21082024-10-15T18:01:17.144990Repositório Institucional da Universidade Federal do Espírito Santo (riUfes) - Universidade Federal do Espírito Santo (UFES)false |
dc.title.none.fl_str_mv |
Detecção automática de doenças em frutos do mamão a partir da análise de imagens por meio de redes neurais profundas |
dc.title.alternative.none.fl_str_mv |
title.alternative |
title |
Detecção automática de doenças em frutos do mamão a partir da análise de imagens por meio de redes neurais profundas |
spellingShingle |
Detecção automática de doenças em frutos do mamão a partir da análise de imagens por meio de redes neurais profundas Moraes, Jairo Lucas de Ciência da Computação Visão computacional em dispositivos móveis Agricultura de precisão Doenças em frutas Aprendizado Profundo CBAM Mamão Carica Papaya subject.br-rjbn |
title_short |
Detecção automática de doenças em frutos do mamão a partir da análise de imagens por meio de redes neurais profundas |
title_full |
Detecção automática de doenças em frutos do mamão a partir da análise de imagens por meio de redes neurais profundas |
title_fullStr |
Detecção automática de doenças em frutos do mamão a partir da análise de imagens por meio de redes neurais profundas |
title_full_unstemmed |
Detecção automática de doenças em frutos do mamão a partir da análise de imagens por meio de redes neurais profundas |
title_sort |
Detecção automática de doenças em frutos do mamão a partir da análise de imagens por meio de redes neurais profundas |
author |
Moraes, Jairo Lucas de |
author_facet |
Moraes, Jairo Lucas de |
author_role |
author |
dc.contributor.authorID.none.fl_str_mv |
https://orcid.org/0000-0002-5111-0811 |
dc.contributor.authorLattes.none.fl_str_mv |
http://lattes.cnpq.br/8743832227027911 |
dc.contributor.advisor1.fl_str_mv |
Souza, Alberto Ferreira de |
dc.contributor.advisor1ID.fl_str_mv |
https://orcid.org/0000000315618447 |
dc.contributor.advisor1Lattes.fl_str_mv |
http://lattes.cnpq.br/7573837292080522 |
dc.contributor.author.fl_str_mv |
Moraes, Jairo Lucas de |
dc.contributor.referee1.fl_str_mv |
França, Felipe Maia Galvão |
dc.contributor.referee1ID.fl_str_mv |
https://orcid.org/0000-0002-8980-6208 |
dc.contributor.referee1Lattes.fl_str_mv |
http://lattes.cnpq.br/1097952760431187 |
dc.contributor.referee2.fl_str_mv |
Partelli, Fabio Luiz |
dc.contributor.referee2ID.fl_str_mv |
https://orcid.org/0000000288300846 |
dc.contributor.referee2Lattes.fl_str_mv |
http://lattes.cnpq.br/6730543200776161 |
dc.contributor.referee3.fl_str_mv |
Komati, Karin Satie |
dc.contributor.referee3ID.fl_str_mv |
https://orcid.org/0000-0001-5677-4724 |
dc.contributor.referee3Lattes.fl_str_mv |
http://lattes.cnpq.br/9860697624155451 |
dc.contributor.referee4.fl_str_mv |
Oliveira, Elias Silva de |
dc.contributor.referee4Lattes.fl_str_mv |
http://lattes.cnpq.br/2210356035827181 |
contributor_str_mv |
Souza, Alberto Ferreira de França, Felipe Maia Galvão Partelli, Fabio Luiz Komati, Karin Satie Oliveira, Elias Silva de |
dc.subject.cnpq.fl_str_mv |
Ciência da Computação |
topic |
Ciência da Computação Visão computacional em dispositivos móveis Agricultura de precisão Doenças em frutas Aprendizado Profundo CBAM Mamão Carica Papaya subject.br-rjbn |
dc.subject.por.fl_str_mv |
Visão computacional em dispositivos móveis Agricultura de precisão Doenças em frutas Aprendizado Profundo CBAM Mamão Carica Papaya |
dc.subject.br-rjbn.none.fl_str_mv |
subject.br-rjbn |
description |
Horticulture plays an essential role in the economies of various countries, serving as a significant source of income and job creation, particularly in developing nations. Within this sector, papaya holds substantial importance, being cultivated in over 60 countries, including Brazil, which stands as the second-largest producer of this fruit. Papaya is a delicate and climacteric fruit, leading to considerable post-harvest losses, underscoring the pivotal role of early detection and accurate classification of fruit injuries in quality control and loss mitigation. Presently, papaya quality control is conducted manually, demanding exhaustive and repetitive efforts, often necessitating specialized knowledge that may not always be readily available to small-scale farmers or small fruit processing facilities. Given this backdrop, the implementation of autonomous or semi-autonomous system solutions aimed at assisting in papaya quality control, including disease detection and physical damage identification, is highly desirable. Such solutions could effectively mitigate industry losses, offering a more efficient, precise, and reliable approach to ensuring fruit quality and maximizing productivity in the sector. In this thesis, we propose a comprehensive solution spanning from the creation of an unprecedented dataset in the literature to the development of a mobile application. This includes the implementation of novel convolutional neural network (CNN) architectures utilizing the Convolutional Block Attention Module (CBAM). Our dataset comprises more than 23,000 examples of eight types of injuries (Anthracnose, Phytophthora, Chocolate Spot, Sticky Disease, Black Spot, Physiological Spot, Mechanical Damage, and Scar) affecting papaya fruits, alongside examples of healthy fruits. The developed detector achieves a new state-ofthe-art in papaya fruit disease detection, with an average precision (mAP) of 86.2%. This performance significantly surpasses that of human experts, who achieved an average precision of 67.3%. Lastly, we optimized the structure and weights of our detector for use on mobile devices and created a robust mobile application that can run on common smartphones. It can detect diseases in papaya fruits at a rate of up to 6 frames per second without requiring additional resources. |
publishDate |
2023 |
dc.date.issued.fl_str_mv |
2023-07-14 |
dc.date.accessioned.fl_str_mv |
2024-05-30T01:42:37Z |
dc.date.available.fl_str_mv |
2024-05-30T01:42:37Z |
dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
dc.type.driver.fl_str_mv |
info:eu-repo/semantics/doctoralThesis |
format |
doctoralThesis |
status_str |
publishedVersion |
dc.identifier.uri.fl_str_mv |
http://repositorio.ufes.br/handle/10/17171 |
url |
http://repositorio.ufes.br/handle/10/17171 |
dc.language.iso.fl_str_mv |
por |
language |
por |
dc.rights.driver.fl_str_mv |
info:eu-repo/semantics/openAccess |
eu_rights_str_mv |
openAccess |
dc.format.none.fl_str_mv |
Text |
dc.publisher.none.fl_str_mv |
Universidade Federal do Espírito Santo Doutorado em Ciência da Computação |
dc.publisher.program.fl_str_mv |
Programa de Pós-Graduação em Informática |
dc.publisher.initials.fl_str_mv |
UFES |
dc.publisher.country.fl_str_mv |
BR |
dc.publisher.department.fl_str_mv |
Centro Tecnológico |
publisher.none.fl_str_mv |
Universidade Federal do Espírito Santo Doutorado em Ciência da Computação |
dc.source.none.fl_str_mv |
reponame:Repositório Institucional da Universidade Federal do Espírito Santo (riUfes) instname:Universidade Federal do Espírito Santo (UFES) instacron:UFES |
instname_str |
Universidade Federal do Espírito Santo (UFES) |
instacron_str |
UFES |
institution |
UFES |
reponame_str |
Repositório Institucional da Universidade Federal do Espírito Santo (riUfes) |
collection |
Repositório Institucional da Universidade Federal do Espírito Santo (riUfes) |
bitstream.url.fl_str_mv |
http://repositorio.ufes.br/bitstreams/ccf1049a-086c-4c30-aed9-f4df0680b371/download |
bitstream.checksum.fl_str_mv |
a673647dde4d362ad777817e1883a7c4 |
bitstream.checksumAlgorithm.fl_str_mv |
MD5 |
repository.name.fl_str_mv |
Repositório Institucional da Universidade Federal do Espírito Santo (riUfes) - Universidade Federal do Espírito Santo (UFES) |
repository.mail.fl_str_mv |
|
_version_ |
1813022569701310464 |