Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente

Detalhes bibliográficos
Autor(a) principal: Welter, Alexsandro Reichert
Data de Publicação: 2022
Tipo de documento: Trabalho de conclusão de curso
Idioma: por
Título da fonte: Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT))
Texto Completo: http://repositorio.utfpr.edu.br/jspui/handle/1/30617
Resumo: Os veículos guiados automaticamente (AGVs) estão relacionados ao problema da navegação autônoma na logística interna, sendo essa uma área muito pertinente na indústria atual. Com a utilização de robôs móveis, que não precisam da atuação humana direta para o seu funcionamento, é possível reduzir custos, aumentar a eficiência e facilitar a manutenção de ambientes de logística interna. Dentre as várias soluções, existe o uso do aprendizado por reforço aplicado ao controle do robô. Essa técnica de aprendizado tem a característica de ter uma troca de informações entre o ambiente e o agente, com o agente buscando objetivos e o ambiente retornando recompensas para cada uma de suas ações. Tais características permitem que o aprendizado ocorra sem o conhecimento prévio do ambiente, sendo esse um grande diferencial para a área da robótica, pela sua adaptabilidade a ambientes dinâmicos e diversos. O presente trabalho tem o objetivo de avaliar o algoritmo Deep Q-learning (DQN) para o uso na navegação autônoma de um robô móvel em ambiente de simulação e realizar a análise dos resultados obtidos.
id UTFPR-12_0cd2ac5fdbf88120dab125dd095bd286
oai_identifier_str oai:repositorio.utfpr.edu.br:1/30617
network_acronym_str UTFPR-12
network_name_str Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT))
repository_id_str
spelling 2023-02-23T14:17:38Z2023-02-23T14:17:38Z2022-12-09WELTER, Alexsandro Reichert. Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente. 2022. Trabalho de Conclusão de Curso (Bacharelado em Engenharia de Computação) - Universidade Tecnológica Federal do Paraná, Pato Branco, 2022.http://repositorio.utfpr.edu.br/jspui/handle/1/30617Os veículos guiados automaticamente (AGVs) estão relacionados ao problema da navegação autônoma na logística interna, sendo essa uma área muito pertinente na indústria atual. Com a utilização de robôs móveis, que não precisam da atuação humana direta para o seu funcionamento, é possível reduzir custos, aumentar a eficiência e facilitar a manutenção de ambientes de logística interna. Dentre as várias soluções, existe o uso do aprendizado por reforço aplicado ao controle do robô. Essa técnica de aprendizado tem a característica de ter uma troca de informações entre o ambiente e o agente, com o agente buscando objetivos e o ambiente retornando recompensas para cada uma de suas ações. Tais características permitem que o aprendizado ocorra sem o conhecimento prévio do ambiente, sendo esse um grande diferencial para a área da robótica, pela sua adaptabilidade a ambientes dinâmicos e diversos. O presente trabalho tem o objetivo de avaliar o algoritmo Deep Q-learning (DQN) para o uso na navegação autônoma de um robô móvel em ambiente de simulação e realizar a análise dos resultados obtidos.Automated Guided Vehicles (AGVs) are related to the problem of autonomous navigation in internal logistics, which is a very relevant area in the current industry. With the use of mobile robots, which are controlled without direct human interaction, it is possible to reduce costs, increase efficiency and facilitate the maintenance of internal logistics environments. Among the various solutions, there is the use of reinforcement learning applied to robot control. This learning technique has the characteristic of having an exchange of information between environment and agent, with the agent seeking goals and the environment returning rewards for each of its actions. Such characteristics allow learning to be conducted without prior knowledge of the environment, which is useful in the robotics field, due to its adaptability to dynamic and diverse environments. The present work aims to evaluate the Deep Q-learning (DQN) algorithm for use in autonomous navigation of a mobile robot in a simulation environment and to analyze the results obtained.porUniversidade Tecnológica Federal do ParanáPato BrancoEngenharia de ComputaçãoUTFPRBrasilDepartamento Acadêmico de Informáticahttp://creativecommons.org/licenses/by-sa/4.0/info:eu-repo/semantics/openAccessCNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAOVeículos - Controle automáticoRobôsSistemas de veículos guiados automatizadosRobóticaVehicles - Automatic controlRobotsAutomated guided vehicle systemsRoboticsAprendizado por reforço profundo para navegação de um veículo guiado automaticamenteDeep reinforcement learning applied to a automated guided vehicleinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/bachelorThesisPato BrancoMarin, Luciene de OliveiraLima, Jeferson José deMarin, Luciene de OliveiraLima, Jeferson José deLinares, Kathya Silvia CollazosOrtiz, Jorge Luis RoelWelter, Alexsandro Reichertreponame:Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT))instname:Universidade Tecnológica Federal do Paraná (UTFPR)instacron:UTFPRORIGINALaprendizadoreforcoveiculoguiado.pdfaprendizadoreforcoveiculoguiado.pdfapplication/pdf4113465http://repositorio.utfpr.edu.br:8080/jspui/bitstream/1/30617/1/aprendizadoreforcoveiculoguiado.pdfe08c196a043bc16d30dfd33171674cf6MD51CC-LICENSElicense_rdflicense_rdfapplication/rdf+xml; charset=utf-81025http://repositorio.utfpr.edu.br:8080/jspui/bitstream/1/30617/4/license_rdf84a900c9dd4b2a10095a94649e1ce116MD54LICENSElicense.txtlicense.txttext/plain; charset=utf-81290http://repositorio.utfpr.edu.br:8080/jspui/bitstream/1/30617/5/license.txtb9d82215ab23456fa2d8b49c5df1b95bMD55TEXTaprendizadoreforcoveiculoguiado.pdf.txtaprendizadoreforcoveiculoguiado.pdf.txtExtracted texttext/plain106773http://repositorio.utfpr.edu.br:8080/jspui/bitstream/1/30617/6/aprendizadoreforcoveiculoguiado.pdf.txt346d710d60a58f296d2bb8089a9cdb3eMD56THUMBNAILaprendizadoreforcoveiculoguiado.pdf.jpgaprendizadoreforcoveiculoguiado.pdf.jpgGenerated Thumbnailimage/jpeg1249http://repositorio.utfpr.edu.br:8080/jspui/bitstream/1/30617/7/aprendizadoreforcoveiculoguiado.pdf.jpg56d63ff77ad2c2792ddd821077689a54MD571/306172023-02-25 04:07:06.846oai:repositorio.utfpr.edu.br:1/30617TmEgcXVhbGlkYWRlIGRlIHRpdHVsYXIgZG9zIGRpcmVpdG9zIGRlIGF1dG9yIGRhIHB1YmxpY2HDp8OjbywgYXV0b3Jpem8gYSBVVEZQUiBhIHZlaWN1bGFyLCAKYXRyYXbDqXMgZG8gUG9ydGFsIGRlIEluZm9ybWHDp8OjbyBlbSBBY2Vzc28gQWJlcnRvIChQSUFBKSBlIGRvcyBDYXTDoWxvZ29zIGRhcyBCaWJsaW90ZWNhcyAKZGVzdGEgSW5zdGl0dWnDp8Ojbywgc2VtIHJlc3NhcmNpbWVudG8gZG9zIGRpcmVpdG9zIGF1dG9yYWlzLCBkZSBhY29yZG8gY29tIGEgTGVpIG5vIDkuNjEwLzk4LCAKbyB0ZXh0byBkZXN0YSBvYnJhLCBvYnNlcnZhbmRvIGFzIGNvbmRpw6fDtWVzIGRlIGRpc3BvbmliaWxpemHDp8OjbyByZWdpc3RyYWRhcyBubyBpdGVtIDQgZG8gCuKAnFRlcm1vIGRlIEF1dG9yaXphw6fDo28gcGFyYSBQdWJsaWNhw6fDo28gZGUgVHJhYmFsaG9zIGRlIENvbmNsdXPDo28gZGUgQ3Vyc28gZGUgR3JhZHVhw6fDo28gZSAKRXNwZWNpYWxpemHDp8OjbywgRGlzc2VydGHDp8O1ZXMgZSBUZXNlcyBubyBQb3J0YWwgZGUgSW5mb3JtYcOnw6NvIGUgbm9zIENhdMOhbG9nb3MgRWxldHLDtG5pY29zIGRvIApTaXN0ZW1hIGRlIEJpYmxpb3RlY2FzIGRhIFVURlBS4oCdLCBwYXJhIGZpbnMgZGUgbGVpdHVyYSwgaW1wcmVzc8OjbyBlL291IGRvd25sb2FkLCB2aXNhbmRvIGEgCmRpdnVsZ2HDp8OjbyBkYSBwcm9kdcOnw6NvIGNpZW50w61maWNhIGJyYXNpbGVpcmEuCgogIEFzIHZpYXMgb3JpZ2luYWlzIGUgYXNzaW5hZGFzIHBlbG8ocykgYXV0b3IoZXMpIGRvIOKAnFRlcm1vIGRlIEF1dG9yaXphw6fDo28gcGFyYSBQdWJsaWNhw6fDo28gZGUgClRyYWJhbGhvcyBkZSBDb25jbHVzw6NvIGRlIEN1cnNvIGRlIEdyYWR1YcOnw6NvIGUgRXNwZWNpYWxpemHDp8OjbywgRGlzc2VydGHDp8O1ZXMgZSBUZXNlcyBubyBQb3J0YWwgCmRlIEluZm9ybWHDp8OjbyBlIG5vcyBDYXTDoWxvZ29zIEVsZXRyw7RuaWNvcyBkbyBTaXN0ZW1hIGRlIEJpYmxpb3RlY2FzIGRhIFVURlBS4oCdIGUgZGEg4oCcRGVjbGFyYcOnw6NvIApkZSBBdXRvcmlh4oCdIGVuY29udHJhbS1zZSBhcnF1aXZhZGFzIG5hIEJpYmxpb3RlY2EgZG8gQ8OibXB1cyBubyBxdWFsIG8gdHJhYmFsaG8gZm9pIGRlZmVuZGlkby4gCk5vIGNhc28gZGUgcHVibGljYcOnw7VlcyBkZSBhdXRvcmlhIGNvbGV0aXZhIGUgbXVsdGljw6JtcHVzLCBvcyBkb2N1bWVudG9zIGZpY2Fyw6NvIHNvYiBndWFyZGEgZGEgCkJpYmxpb3RlY2EgY29tIGEgcXVhbCBvIOKAnHByaW1laXJvIGF1dG9y4oCdIHBvc3N1YSB2w61uY3Vsby4KRepositório de PublicaçõesPUBhttp://repositorio.utfpr.edu.br:8080/oai/requestopendoar:2023-02-25T06:07:06Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT)) - Universidade Tecnológica Federal do Paraná (UTFPR)false
dc.title.pt_BR.fl_str_mv Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente
dc.title.alternative.pt_BR.fl_str_mv Deep reinforcement learning applied to a automated guided vehicle
title Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente
spellingShingle Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente
Welter, Alexsandro Reichert
CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO
Veículos - Controle automático
Robôs
Sistemas de veículos guiados automatizados
Robótica
Vehicles - Automatic control
Robots
Automated guided vehicle systems
Robotics
title_short Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente
title_full Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente
title_fullStr Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente
title_full_unstemmed Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente
title_sort Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente
author Welter, Alexsandro Reichert
author_facet Welter, Alexsandro Reichert
author_role author
dc.contributor.advisor1.fl_str_mv Marin, Luciene de Oliveira
dc.contributor.advisor-co1.fl_str_mv Lima, Jeferson José de
dc.contributor.referee1.fl_str_mv Marin, Luciene de Oliveira
dc.contributor.referee2.fl_str_mv Lima, Jeferson José de
dc.contributor.referee3.fl_str_mv Linares, Kathya Silvia Collazos
dc.contributor.referee4.fl_str_mv Ortiz, Jorge Luis Roel
dc.contributor.author.fl_str_mv Welter, Alexsandro Reichert
contributor_str_mv Marin, Luciene de Oliveira
Lima, Jeferson José de
Marin, Luciene de Oliveira
Lima, Jeferson José de
Linares, Kathya Silvia Collazos
Ortiz, Jorge Luis Roel
dc.subject.cnpq.fl_str_mv CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO
topic CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO
Veículos - Controle automático
Robôs
Sistemas de veículos guiados automatizados
Robótica
Vehicles - Automatic control
Robots
Automated guided vehicle systems
Robotics
dc.subject.por.fl_str_mv Veículos - Controle automático
Robôs
Sistemas de veículos guiados automatizados
Robótica
Vehicles - Automatic control
Robots
Automated guided vehicle systems
Robotics
description Os veículos guiados automaticamente (AGVs) estão relacionados ao problema da navegação autônoma na logística interna, sendo essa uma área muito pertinente na indústria atual. Com a utilização de robôs móveis, que não precisam da atuação humana direta para o seu funcionamento, é possível reduzir custos, aumentar a eficiência e facilitar a manutenção de ambientes de logística interna. Dentre as várias soluções, existe o uso do aprendizado por reforço aplicado ao controle do robô. Essa técnica de aprendizado tem a característica de ter uma troca de informações entre o ambiente e o agente, com o agente buscando objetivos e o ambiente retornando recompensas para cada uma de suas ações. Tais características permitem que o aprendizado ocorra sem o conhecimento prévio do ambiente, sendo esse um grande diferencial para a área da robótica, pela sua adaptabilidade a ambientes dinâmicos e diversos. O presente trabalho tem o objetivo de avaliar o algoritmo Deep Q-learning (DQN) para o uso na navegação autônoma de um robô móvel em ambiente de simulação e realizar a análise dos resultados obtidos.
publishDate 2022
dc.date.issued.fl_str_mv 2022-12-09
dc.date.accessioned.fl_str_mv 2023-02-23T14:17:38Z
dc.date.available.fl_str_mv 2023-02-23T14:17:38Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/bachelorThesis
format bachelorThesis
status_str publishedVersion
dc.identifier.citation.fl_str_mv WELTER, Alexsandro Reichert. Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente. 2022. Trabalho de Conclusão de Curso (Bacharelado em Engenharia de Computação) - Universidade Tecnológica Federal do Paraná, Pato Branco, 2022.
dc.identifier.uri.fl_str_mv http://repositorio.utfpr.edu.br/jspui/handle/1/30617
identifier_str_mv WELTER, Alexsandro Reichert. Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente. 2022. Trabalho de Conclusão de Curso (Bacharelado em Engenharia de Computação) - Universidade Tecnológica Federal do Paraná, Pato Branco, 2022.
url http://repositorio.utfpr.edu.br/jspui/handle/1/30617
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv http://creativecommons.org/licenses/by-sa/4.0/
info:eu-repo/semantics/openAccess
rights_invalid_str_mv http://creativecommons.org/licenses/by-sa/4.0/
eu_rights_str_mv openAccess
dc.publisher.none.fl_str_mv Universidade Tecnológica Federal do Paraná
Pato Branco
dc.publisher.program.fl_str_mv Engenharia de Computação
dc.publisher.initials.fl_str_mv UTFPR
dc.publisher.country.fl_str_mv Brasil
dc.publisher.department.fl_str_mv Departamento Acadêmico de Informática
publisher.none.fl_str_mv Universidade Tecnológica Federal do Paraná
Pato Branco
dc.source.none.fl_str_mv reponame:Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT))
instname:Universidade Tecnológica Federal do Paraná (UTFPR)
instacron:UTFPR
instname_str Universidade Tecnológica Federal do Paraná (UTFPR)
instacron_str UTFPR
institution UTFPR
reponame_str Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT))
collection Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT))
bitstream.url.fl_str_mv http://repositorio.utfpr.edu.br:8080/jspui/bitstream/1/30617/1/aprendizadoreforcoveiculoguiado.pdf
http://repositorio.utfpr.edu.br:8080/jspui/bitstream/1/30617/4/license_rdf
http://repositorio.utfpr.edu.br:8080/jspui/bitstream/1/30617/5/license.txt
http://repositorio.utfpr.edu.br:8080/jspui/bitstream/1/30617/6/aprendizadoreforcoveiculoguiado.pdf.txt
http://repositorio.utfpr.edu.br:8080/jspui/bitstream/1/30617/7/aprendizadoreforcoveiculoguiado.pdf.jpg
bitstream.checksum.fl_str_mv e08c196a043bc16d30dfd33171674cf6
84a900c9dd4b2a10095a94649e1ce116
b9d82215ab23456fa2d8b49c5df1b95b
346d710d60a58f296d2bb8089a9cdb3e
56d63ff77ad2c2792ddd821077689a54
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
MD5
MD5
repository.name.fl_str_mv Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT)) - Universidade Tecnológica Federal do Paraná (UTFPR)
repository.mail.fl_str_mv
_version_ 1797043843604938752