Um método de dois estágios para detecção de pólipos em imagens de colonoscopia usando aprendizado profundo

Detalhes bibliográficos
Autor(a) principal: LIMA , Alan Carlos de Moura
Data de Publicação: 2023
Tipo de documento: Tese
Idioma: por
Título da fonte: Biblioteca Digital de Teses e Dissertações da UFMA
Texto Completo: https://tedebc.ufma.br/jspui/handle/tede/tede/5052
Resumo: The gastrointestinal tract, the pathway responsible for the entire digestive process, can be affected by various types of diseases, including colorectal cancer, which is the third leading cause of cancer death. Colorectal polyps, benign tumors detectable through images captured by colonoscopes in the colon of the large intestine, are its main precursors. However, many polyps are overlooked during colonoscopy due to technical and cognitive challenges. Studies indicate that improving the detection rate of these lesions can significantly reduce the risk of colorectal cancer. Therefore, computer-assisted detection techniques are being developed to enhance detection quality during regular exams. This thesis presents a two-stage polyp detection method for colonoscopy images. The first stage involves identifying possible polyp areas using a saliency map extraction model supported by the extracted depth maps. Depth maps are images that represent the distance between objects and the camera, and saliency maps are images that highlight the most relevant regions for human visual perception. Initially, the scope area is reduced by extracting the salient objects (S) present in the image so that this segmented area is combined with the green (G) and blue (B) channels of an image in RGB standard, thus forming a new 3-channel image, known as SGB. The second stage of the method consists of detecting polyps in the extracted images resulting from the first stage, combined with the green and blue channels. For this, models based on convolutional neural networks and Transformers were applied, which are deep learning techniques capable of extracting complex visual features and making accurate classifications. Several experiments were carried out using four public colonoscopy datasets. The best results obtained for the task of polyp detection were satisfactory, achieving 91% Average Precision on the CVC-ClinicDB base and 92% Average Precision on the Kvasir-SEG base, both with SGB images, using the Transformers architecture. In addition, the proposed method outperformed others in the literature on some bases.
id UFMA_89f503e62d6304548cddbdcd6bec3260
oai_identifier_str oai:tede2:tede/5052
network_acronym_str UFMA
network_name_str Biblioteca Digital de Teses e Dissertações da UFMA
repository_id_str 2131
spelling PAIVA, Anselmo Cardoso dehttp://lattes.cnpq.br/6446831084215512COIMBRA, Miguel TavaresBRAZ JÚNIOR, Geraldohttp://lattes.cnpq.br/8287861610873629SILVA, Aristófanes Corrêahttp://lattes.cnpq.br/2446301582459104CUNHA, António Manuel Trigueiros da Silvahttp://lattes.cnpq.br/5627403952778618RAPOSO, Alberto Barbosahttp://lattes.cnpq.br/4394162331037750http://lattes.cnpq.br/6446831084215512LIMA , Alan Carlos de Moura2023-11-21T02:33:46Z2023-10-06LIMA , Alan Carlos de Moura. Um método de dois estágios para detecção de pólipos em imagens de colonoscopia usando aprendizado profundo. 2023.156 f. Tese (Programa de Pós-Graduação em Engenharia de Eletricidade/CCET) - Universidade Federal do Maranhão, São Luís, 2023.https://tedebc.ufma.br/jspui/handle/tede/tede/5052The gastrointestinal tract, the pathway responsible for the entire digestive process, can be affected by various types of diseases, including colorectal cancer, which is the third leading cause of cancer death. Colorectal polyps, benign tumors detectable through images captured by colonoscopes in the colon of the large intestine, are its main precursors. However, many polyps are overlooked during colonoscopy due to technical and cognitive challenges. Studies indicate that improving the detection rate of these lesions can significantly reduce the risk of colorectal cancer. Therefore, computer-assisted detection techniques are being developed to enhance detection quality during regular exams. This thesis presents a two-stage polyp detection method for colonoscopy images. The first stage involves identifying possible polyp areas using a saliency map extraction model supported by the extracted depth maps. Depth maps are images that represent the distance between objects and the camera, and saliency maps are images that highlight the most relevant regions for human visual perception. Initially, the scope area is reduced by extracting the salient objects (S) present in the image so that this segmented area is combined with the green (G) and blue (B) channels of an image in RGB standard, thus forming a new 3-channel image, known as SGB. The second stage of the method consists of detecting polyps in the extracted images resulting from the first stage, combined with the green and blue channels. For this, models based on convolutional neural networks and Transformers were applied, which are deep learning techniques capable of extracting complex visual features and making accurate classifications. Several experiments were carried out using four public colonoscopy datasets. The best results obtained for the task of polyp detection were satisfactory, achieving 91% Average Precision on the CVC-ClinicDB base and 92% Average Precision on the Kvasir-SEG base, both with SGB images, using the Transformers architecture. In addition, the proposed method outperformed others in the literature on some bases.O trato gastrointestinal, via responsável por todo o processo digestivo, pode ser afetado por diversos tipos de doenças, incluindo o câncer colorretal, que é a terceira principal causa de morte por câncer. Os pólipos colorretais, tumores benignos detectáveis por meio de imagens capturadas por colonoscópios no cólon do intestino grosso, são seus principais precursores. No entanto, muitos pólipos são negligenciados durante o exame de colonoscopia devido a desafios técnicos e cognitivos. Estudos indicam que a melhoria na taxa de detecção dessas lesões pode reduzir significativamente o risco de câncer colorretal. Assim, técnicas de detecção assistida por computador estão sendo desenvolvidas com o intuito de aprimorar a qualidade da detecção durante exames regulares. Essa tese apresenta um método de detecção de pólipos em dois estágios para imagens de colonoscopia. O primeiro estágio consiste em identificar possíveis áreas de pólipos usando um modelo de extração de mapa de saliência apoiado pelos mapas de profundidade extraídos. Os mapas de profundidade são imagens que representam a distância entre os objetos e a câmera, e os mapas de saliência são imagens que destacam as regiões mais relevantes para a percepção visual humana. Inicialmente, é realizada a redução da área de escopo através da extração dos objetos salientes (S) presentes na imagem, para que em seguida seja realizada a união dessa área segmentada com os canais verde (G) e azul (B) de uma imagem no padrão RGB, formando assim uma nova imagem de 3 canais, conhecida como SGB. O segundo estágio do método consiste em detectar pólipos nas imagens extraídas resultantes do primeiro estágio, combinadas com os canais verde e azul. Para isso, foram aplicados modelos baseados em redes neurais convolucionais e Transformers, que são técnicas de aprendizado profundo capazes de extrair características visuais complexas e realizar classificações precisas. Vários experimentos foram realizados utilizando quatro conjuntos de dados públicos de colonoscopia. Os melhores resultados obtidos para a tarefa de detecção de pólipos foram satisfatórios, alcançando 91% de Average Precision na base CVC-ClinicDB e 92% de Average Precision na base Kvasir-SEG, ambos com as imagens em SGB, usando a arquitetura Transformers. Além disso, o método proposto superou outros métodos da literatura em algumas bases. Palavras-chave:Submitted by Daniella Santos (daniella.santos@ufma.br) on 2023-11-21T02:33:44Z No. of bitstreams: 1 ALANLIMA.pdf: 21586811 bytes, checksum: bea37c3b6575944ae1f6905105b7a21e (MD5)Made available in DSpace on 2023-11-21T02:33:46Z (GMT). No. of bitstreams: 1 ALANLIMA.pdf: 21586811 bytes, checksum: bea37c3b6575944ae1f6905105b7a21e (MD5) Previous issue date: 2023-10-06application/pdfporUniversidade Federal do MaranhãoPROGRAMA DE PÓS-GRADUAÇÃO EM ENGENHARIA DE ELETRICIDADE/CCETUFMABrasilDEPARTAMENTO DE ENGENHARIA DA ELETRICIDADE/CCETaprendizagem profunda;detecção de pólipos;imagens de colonoscopia;mapas de profundidade;objetos salientes;redes neurais convolucionais;transformers;colonoscopy images;convolutional neural networks;deep learning;depth maps;polyp detection;saliency objects;transformers.Engenharia ElétricaUm método de dois estágios para detecção de pólipos em imagens de colonoscopia usando aprendizado profundoA Two-Stage Method for Polyp Detection in Colonoscopy Images Using Deep Learninginfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesisinfo:eu-repo/semantics/openAccessreponame:Biblioteca Digital de Teses e Dissertações da UFMAinstname:Universidade Federal do Maranhão (UFMA)instacron:UFMAORIGINALALANLIMA.pdfALANLIMA.pdfapplication/pdf21586811http://tedebc.ufma.br:8080/bitstream/tede/5052/2/ALANLIMA.pdfbea37c3b6575944ae1f6905105b7a21eMD52LICENSElicense.txtlicense.txttext/plain; charset=utf-82255http://tedebc.ufma.br:8080/bitstream/tede/5052/1/license.txt97eeade1fce43278e63fe063657f8083MD51tede/50522023-11-20 23:33:46.556oai:tede2:tede/5052IExJQ0VOw4dBIERFIERJU1RSSUJVScOHw4NPIE7Dg08tRVhDTFVTSVZBCgpDb20gYSBhcHJlc2VudGHDp8OjbyBkZXN0YSBsaWNlbsOnYSxvIGF1dG9yIChlcykgb3UgbyB0aXR1bGFyIGRvcyBkaXJlaXRvcyBkZSBhdXRvciBjb25jZWRlIMOgIFVuaXZlcnNpZGFkZSBGZWRlcmFsIGRvIE1hcmFuaMOjbyAoVUZNQSkgbyBkaXJlaXRvIG7Do28tZXhjbHVzaXZvIGRlIHJlcHJvZHV6aXIsIHRyYWR1emlyIChjb25mb3JtZSBkZWZpbmlkbyBhYmFpeG8pLCBlL291IGRpc3RyaWJ1aXIgYSBzdWEgdGVzZSBvdSBkaXNzZXJ0YcOnw6NvIChpbmNsdWluZG8gbyByZXN1bW8pIHBvciB0b2RvIG8gbXVuZG8gbm8gZm9ybWF0byBpbXByZXNzbyBlIGVsZXRyw7RuaWNvIGUgZW0gcXVhbHF1ZXIgbWVpbywgaW5jbHVpbmRvIG9zIGZvcm1hdG9zIMOhdWRpbyBvdSB2w61kZW8uCgpWb2PDqiBjb25jb3JkYSBxdWUgYSBVRk1BIHBvZGUsIHNlbSBhbHRlcmFyIG8gY29udGXDumRvLCB0cmFuc3BvciBhIHN1YSB0ZXNlIG91IGRpc3NlcnRhw6fDo28gcGFyYSBxdWFscXVlciBtZWlvIG91IGZvcm1hdG8gcGFyYSBmaW5zIGRlIHByZXNlcnZhw6fDo28uCgpWb2PDqiB0YW1iw6ltIGNvbmNvcmRhIHF1ZSBhIFVGTUEgcG9kZSBtYW50ZXIgbWFpcyBkZSB1bWEgY8OzcGlhIGRlIHN1YSB0ZXNlIG91IGRpc3NlcnRhw6fDo28gcGFyYSBmaW5zIGRlIHNlZ3VyYW7Dp2EsIGJhY2stdXAgZSBwcmVzZXJ2YcOnw6NvLgoKVm9jw6ogZGVjbGFyYSBxdWUgYSBzdWEgdGVzZSBvdSBkaXNzZXJ0YcOnw6NvIMOpIG9yaWdpbmFsIGUgcXVlIHZvY8OqIHRlbSBvIHBvZGVyIGRlIGNvbmNlZGVyIG9zIGRpcmVpdG9zIGNvbnRpZG9zIG5lc3RhIGxpY2Vuw6dhLiBWb2PDqiB0YW1iw6ltIGRlY2xhcmEgcXVlIG8gZGVww7NzaXRvIGRhIHN1YSB0ZXNlIG91IGRpc3NlcnRhw6fDo28gbsOjbywgcXVlIHNlamEgZGUgc2V1IGNvbmhlY2ltZW50bywgaW5mcmluZ2UgZGlyZWl0b3MgYXV0b3JhaXMgZGUgbmluZ3XDqW0uCgpDYXNvIGEgc3VhIHRlc2Ugb3UgZGlzc2VydGHDp8OjbyBjb250ZW5oYSBtYXRlcmlhbCBxdWUgdm9jw6ogbsOjbyBwb3NzdWkgYSB0aXR1bGFyaWRhZGUgZG9zIGRpcmVpdG9zIGF1dG9yYWlzLCB2b2PDqiBkZWNsYXJhIHF1ZSBvYnRldmUgYSBwZXJtaXNzw6NvIGlycmVzdHJpdGEgZG8gZGV0ZW50b3IgZG9zIGRpcmVpdG9zIGF1dG9yYWlzIHBhcmEgY29uY2VkZXIgw6AgVUZNQSBvcyBkaXJlaXRvcyBhcHJlc2VudGFkb3MgbmVzdGEgbGljZW7Dp2EsIGUgcXVlIGVzc2UgbWF0ZXJpYWwgZGUgcHJvcHJpZWRhZGUgZGUgdGVyY2Vpcm9zIGVzdMOhIGNsYXJhbWVudGUgaWRlbnRpZmljYWRvIGUgcmVjb25oZWNpZG8gbm8gdGV4dG8gb3Ugbm8gY29udGXDumRvIGRhIHRlc2Ugb3UgZGlzc2VydGHDp8OjbyBvcmEgZGVwb3NpdGFkYS4KCkNBU08gQSBURVNFIE9VIERJU1NFUlRBw4fDg08gT1JBIERFUE9TSVRBREEgVEVOSEEgU0lETyBSRVNVTFRBRE8gREUgVU0gUEFUUk9Dw41OSU8gT1UgQVBPSU8gREUgVU1BIEFHw4pOQ0lBIERFIEZPTUVOVE8gT1UgT1VUUk8gT1JHQU5JU01PIFFVRSBOw4NPIFNFSkEgQSBVRk1BLCBWT0PDiiBERUNMQVJBIFFVRSBSRVNQRUlUT1UgVE9ET1MgRSBRVUFJU1FVRVIgRElSRUlUT1MgREUgUkVWSVPDg08gQ09NTyBUQU1Cw4lNIEFTIERFTUFJUyBPQlJJR0HDh8OVRVMgRVhJR0lEQVMgUE9SIENPTlRSQVRPIE9VIEFDT1JETy4KCkEgVUZNQSBzZSBjb21wcm9tZXRlIGEgaWRlbnRpZmljYXIgY2xhcmFtZW50ZSBvIHNldSBub21lIG91IG8ocykgbm9tZShzKSBkbyhzKSBkZXRlbnRvcihlcykgZG9zIGRpcmVpdG9zIGF1dG9yYWlzIGRhIHRlc2Ugb3UgZGlzc2VydGHDp8OjbywgZSBuw6NvIGZhcsOhIHF1YWxxdWVyIGFsdGVyYcOnw6NvLCBhbMOpbSBkYXF1ZWxhcyBjb25jZWRpZGFzIHBvciBlc3RhIGxpY2Vuw6dhLgoKRGVjbGFyYSB0YW1iw6ltIHF1ZSB0b2RhcyBhcyBhZmlsaWHDp8O1ZXMgY29ycG9yYXRpdmFzIG91IGluc3RpdHVjaW9uYWlzIGUgdG9kYXMgYXMgZm9udGVzIGRlIGFwb2lvIGZpbmFuY2Vpcm8gYW8gdHJhYmFsaG8gZXN0w6NvIGRldmlkYW1lbnRlIGNpdGFkYXMgb3UgbWVuY2lvbmFkYXMgZSBjZXJ0aWZpY2EgcXVlIG7Do28gaMOhIG5lbmh1bSBpbnRlcmVzc2UgY29tZXJjaWFsIG91IGFzc29jaWF0aXZvIHF1ZSByZXByZXNlbnRlIGNvbmZsaXRvIGRlIGludGVyZXNzZSBlbSBjb25leMOjbyBjb20gbyB0cmFiYWxobyBzdWJtZXRpZG8uCgoKCgoKCgo=Biblioteca Digital de Teses e Dissertaçõeshttps://tedebc.ufma.br/jspui/PUBhttp://tedebc.ufma.br:8080/oai/requestrepositorio@ufma.br||repositorio@ufma.bropendoar:21312023-11-21T02:33:46Biblioteca Digital de Teses e Dissertações da UFMA - Universidade Federal do Maranhão (UFMA)false
dc.title.por.fl_str_mv Um método de dois estágios para detecção de pólipos em imagens de colonoscopia usando aprendizado profundo
dc.title.alternative.eng.fl_str_mv A Two-Stage Method for Polyp Detection in Colonoscopy Images Using Deep Learning
title Um método de dois estágios para detecção de pólipos em imagens de colonoscopia usando aprendizado profundo
spellingShingle Um método de dois estágios para detecção de pólipos em imagens de colonoscopia usando aprendizado profundo
LIMA , Alan Carlos de Moura
aprendizagem profunda;
detecção de pólipos;
imagens de colonoscopia;
mapas de profundidade;
objetos salientes;
redes neurais convolucionais;
transformers;
colonoscopy images;
convolutional neural networks;
deep learning;
depth maps;
polyp detection;
saliency objects;
transformers.
Engenharia Elétrica
title_short Um método de dois estágios para detecção de pólipos em imagens de colonoscopia usando aprendizado profundo
title_full Um método de dois estágios para detecção de pólipos em imagens de colonoscopia usando aprendizado profundo
title_fullStr Um método de dois estágios para detecção de pólipos em imagens de colonoscopia usando aprendizado profundo
title_full_unstemmed Um método de dois estágios para detecção de pólipos em imagens de colonoscopia usando aprendizado profundo
title_sort Um método de dois estágios para detecção de pólipos em imagens de colonoscopia usando aprendizado profundo
author LIMA , Alan Carlos de Moura
author_facet LIMA , Alan Carlos de Moura
author_role author
dc.contributor.advisor1.fl_str_mv PAIVA, Anselmo Cardoso de
dc.contributor.advisor1Lattes.fl_str_mv http://lattes.cnpq.br/6446831084215512
dc.contributor.advisor-co1.fl_str_mv COIMBRA, Miguel Tavares
dc.contributor.referee1.fl_str_mv BRAZ JÚNIOR, Geraldo
dc.contributor.referee1Lattes.fl_str_mv http://lattes.cnpq.br/8287861610873629
dc.contributor.referee2.fl_str_mv SILVA, Aristófanes Corrêa
dc.contributor.referee2Lattes.fl_str_mv http://lattes.cnpq.br/2446301582459104
dc.contributor.referee3.fl_str_mv CUNHA, António Manuel Trigueiros da Silva
dc.contributor.referee3Lattes.fl_str_mv http://lattes.cnpq.br/5627403952778618
dc.contributor.referee4.fl_str_mv RAPOSO, Alberto Barbosa
dc.contributor.referee4Lattes.fl_str_mv http://lattes.cnpq.br/4394162331037750
dc.contributor.authorLattes.fl_str_mv http://lattes.cnpq.br/6446831084215512
dc.contributor.author.fl_str_mv LIMA , Alan Carlos de Moura
contributor_str_mv PAIVA, Anselmo Cardoso de
COIMBRA, Miguel Tavares
BRAZ JÚNIOR, Geraldo
SILVA, Aristófanes Corrêa
CUNHA, António Manuel Trigueiros da Silva
RAPOSO, Alberto Barbosa
dc.subject.por.fl_str_mv aprendizagem profunda;
detecção de pólipos;
imagens de colonoscopia;
mapas de profundidade;
objetos salientes;
redes neurais convolucionais;
topic aprendizagem profunda;
detecção de pólipos;
imagens de colonoscopia;
mapas de profundidade;
objetos salientes;
redes neurais convolucionais;
transformers;
colonoscopy images;
convolutional neural networks;
deep learning;
depth maps;
polyp detection;
saliency objects;
transformers.
Engenharia Elétrica
dc.subject.eng.fl_str_mv transformers;
colonoscopy images;
convolutional neural networks;
deep learning;
depth maps;
polyp detection;
saliency objects;
transformers.
dc.subject.cnpq.fl_str_mv Engenharia Elétrica
description The gastrointestinal tract, the pathway responsible for the entire digestive process, can be affected by various types of diseases, including colorectal cancer, which is the third leading cause of cancer death. Colorectal polyps, benign tumors detectable through images captured by colonoscopes in the colon of the large intestine, are its main precursors. However, many polyps are overlooked during colonoscopy due to technical and cognitive challenges. Studies indicate that improving the detection rate of these lesions can significantly reduce the risk of colorectal cancer. Therefore, computer-assisted detection techniques are being developed to enhance detection quality during regular exams. This thesis presents a two-stage polyp detection method for colonoscopy images. The first stage involves identifying possible polyp areas using a saliency map extraction model supported by the extracted depth maps. Depth maps are images that represent the distance between objects and the camera, and saliency maps are images that highlight the most relevant regions for human visual perception. Initially, the scope area is reduced by extracting the salient objects (S) present in the image so that this segmented area is combined with the green (G) and blue (B) channels of an image in RGB standard, thus forming a new 3-channel image, known as SGB. The second stage of the method consists of detecting polyps in the extracted images resulting from the first stage, combined with the green and blue channels. For this, models based on convolutional neural networks and Transformers were applied, which are deep learning techniques capable of extracting complex visual features and making accurate classifications. Several experiments were carried out using four public colonoscopy datasets. The best results obtained for the task of polyp detection were satisfactory, achieving 91% Average Precision on the CVC-ClinicDB base and 92% Average Precision on the Kvasir-SEG base, both with SGB images, using the Transformers architecture. In addition, the proposed method outperformed others in the literature on some bases.
publishDate 2023
dc.date.accessioned.fl_str_mv 2023-11-21T02:33:46Z
dc.date.issued.fl_str_mv 2023-10-06
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/doctoralThesis
format doctoralThesis
status_str publishedVersion
dc.identifier.citation.fl_str_mv LIMA , Alan Carlos de Moura. Um método de dois estágios para detecção de pólipos em imagens de colonoscopia usando aprendizado profundo. 2023.156 f. Tese (Programa de Pós-Graduação em Engenharia de Eletricidade/CCET) - Universidade Federal do Maranhão, São Luís, 2023.
dc.identifier.uri.fl_str_mv https://tedebc.ufma.br/jspui/handle/tede/tede/5052
identifier_str_mv LIMA , Alan Carlos de Moura. Um método de dois estágios para detecção de pólipos em imagens de colonoscopia usando aprendizado profundo. 2023.156 f. Tese (Programa de Pós-Graduação em Engenharia de Eletricidade/CCET) - Universidade Federal do Maranhão, São Luís, 2023.
url https://tedebc.ufma.br/jspui/handle/tede/tede/5052
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Universidade Federal do Maranhão
dc.publisher.program.fl_str_mv PROGRAMA DE PÓS-GRADUAÇÃO EM ENGENHARIA DE ELETRICIDADE/CCET
dc.publisher.initials.fl_str_mv UFMA
dc.publisher.country.fl_str_mv Brasil
dc.publisher.department.fl_str_mv DEPARTAMENTO DE ENGENHARIA DA ELETRICIDADE/CCET
publisher.none.fl_str_mv Universidade Federal do Maranhão
dc.source.none.fl_str_mv reponame:Biblioteca Digital de Teses e Dissertações da UFMA
instname:Universidade Federal do Maranhão (UFMA)
instacron:UFMA
instname_str Universidade Federal do Maranhão (UFMA)
instacron_str UFMA
institution UFMA
reponame_str Biblioteca Digital de Teses e Dissertações da UFMA
collection Biblioteca Digital de Teses e Dissertações da UFMA
bitstream.url.fl_str_mv http://tedebc.ufma.br:8080/bitstream/tede/5052/2/ALANLIMA.pdf
http://tedebc.ufma.br:8080/bitstream/tede/5052/1/license.txt
bitstream.checksum.fl_str_mv bea37c3b6575944ae1f6905105b7a21e
97eeade1fce43278e63fe063657f8083
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
repository.name.fl_str_mv Biblioteca Digital de Teses e Dissertações da UFMA - Universidade Federal do Maranhão (UFMA)
repository.mail.fl_str_mv repositorio@ufma.br||repositorio@ufma.br
_version_ 1809926218097623040