Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente
Autor(a) principal: | |
---|---|
Data de Publicação: | 2022 |
Tipo de documento: | Trabalho de conclusão de curso |
Idioma: | por |
Título da fonte: | Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT)) |
Texto Completo: | http://repositorio.utfpr.edu.br/jspui/handle/1/30617 |
Resumo: | Os veículos guiados automaticamente (AGVs) estão relacionados ao problema da navegação autônoma na logística interna, sendo essa uma área muito pertinente na indústria atual. Com a utilização de robôs móveis, que não precisam da atuação humana direta para o seu funcionamento, é possível reduzir custos, aumentar a eficiência e facilitar a manutenção de ambientes de logística interna. Dentre as várias soluções, existe o uso do aprendizado por reforço aplicado ao controle do robô. Essa técnica de aprendizado tem a característica de ter uma troca de informações entre o ambiente e o agente, com o agente buscando objetivos e o ambiente retornando recompensas para cada uma de suas ações. Tais características permitem que o aprendizado ocorra sem o conhecimento prévio do ambiente, sendo esse um grande diferencial para a área da robótica, pela sua adaptabilidade a ambientes dinâmicos e diversos. O presente trabalho tem o objetivo de avaliar o algoritmo Deep Q-learning (DQN) para o uso na navegação autônoma de um robô móvel em ambiente de simulação e realizar a análise dos resultados obtidos. |
id |
UTFPR-12_0cd2ac5fdbf88120dab125dd095bd286 |
---|---|
oai_identifier_str |
oai:repositorio.utfpr.edu.br:1/30617 |
network_acronym_str |
UTFPR-12 |
network_name_str |
Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT)) |
repository_id_str |
|
spelling |
2023-02-23T14:17:38Z2023-02-23T14:17:38Z2022-12-09WELTER, Alexsandro Reichert. Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente. 2022. Trabalho de Conclusão de Curso (Bacharelado em Engenharia de Computação) - Universidade Tecnológica Federal do Paraná, Pato Branco, 2022.http://repositorio.utfpr.edu.br/jspui/handle/1/30617Os veículos guiados automaticamente (AGVs) estão relacionados ao problema da navegação autônoma na logística interna, sendo essa uma área muito pertinente na indústria atual. Com a utilização de robôs móveis, que não precisam da atuação humana direta para o seu funcionamento, é possível reduzir custos, aumentar a eficiência e facilitar a manutenção de ambientes de logística interna. Dentre as várias soluções, existe o uso do aprendizado por reforço aplicado ao controle do robô. Essa técnica de aprendizado tem a característica de ter uma troca de informações entre o ambiente e o agente, com o agente buscando objetivos e o ambiente retornando recompensas para cada uma de suas ações. Tais características permitem que o aprendizado ocorra sem o conhecimento prévio do ambiente, sendo esse um grande diferencial para a área da robótica, pela sua adaptabilidade a ambientes dinâmicos e diversos. O presente trabalho tem o objetivo de avaliar o algoritmo Deep Q-learning (DQN) para o uso na navegação autônoma de um robô móvel em ambiente de simulação e realizar a análise dos resultados obtidos.Automated Guided Vehicles (AGVs) are related to the problem of autonomous navigation in internal logistics, which is a very relevant area in the current industry. With the use of mobile robots, which are controlled without direct human interaction, it is possible to reduce costs, increase efficiency and facilitate the maintenance of internal logistics environments. Among the various solutions, there is the use of reinforcement learning applied to robot control. This learning technique has the characteristic of having an exchange of information between environment and agent, with the agent seeking goals and the environment returning rewards for each of its actions. Such characteristics allow learning to be conducted without prior knowledge of the environment, which is useful in the robotics field, due to its adaptability to dynamic and diverse environments. The present work aims to evaluate the Deep Q-learning (DQN) algorithm for use in autonomous navigation of a mobile robot in a simulation environment and to analyze the results obtained.porUniversidade Tecnológica Federal do ParanáPato BrancoEngenharia de ComputaçãoUTFPRBrasilDepartamento Acadêmico de Informáticahttp://creativecommons.org/licenses/by-sa/4.0/info:eu-repo/semantics/openAccessCNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAOVeículos - Controle automáticoRobôsSistemas de veículos guiados automatizadosRobóticaVehicles - Automatic controlRobotsAutomated guided vehicle systemsRoboticsAprendizado por reforço profundo para navegação de um veículo guiado automaticamenteDeep reinforcement learning applied to a automated guided vehicleinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/bachelorThesisPato BrancoMarin, Luciene de OliveiraLima, Jeferson José deMarin, Luciene de OliveiraLima, Jeferson José deLinares, Kathya Silvia CollazosOrtiz, Jorge Luis RoelWelter, Alexsandro Reichertreponame:Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT))instname:Universidade Tecnológica Federal do Paraná (UTFPR)instacron:UTFPRORIGINALaprendizadoreforcoveiculoguiado.pdfaprendizadoreforcoveiculoguiado.pdfapplication/pdf4113465http://repositorio.utfpr.edu.br:8080/jspui/bitstream/1/30617/1/aprendizadoreforcoveiculoguiado.pdfe08c196a043bc16d30dfd33171674cf6MD51CC-LICENSElicense_rdflicense_rdfapplication/rdf+xml; charset=utf-81025http://repositorio.utfpr.edu.br:8080/jspui/bitstream/1/30617/4/license_rdf84a900c9dd4b2a10095a94649e1ce116MD54LICENSElicense.txtlicense.txttext/plain; charset=utf-81290http://repositorio.utfpr.edu.br:8080/jspui/bitstream/1/30617/5/license.txtb9d82215ab23456fa2d8b49c5df1b95bMD55TEXTaprendizadoreforcoveiculoguiado.pdf.txtaprendizadoreforcoveiculoguiado.pdf.txtExtracted texttext/plain106773http://repositorio.utfpr.edu.br:8080/jspui/bitstream/1/30617/6/aprendizadoreforcoveiculoguiado.pdf.txt346d710d60a58f296d2bb8089a9cdb3eMD56THUMBNAILaprendizadoreforcoveiculoguiado.pdf.jpgaprendizadoreforcoveiculoguiado.pdf.jpgGenerated Thumbnailimage/jpeg1249http://repositorio.utfpr.edu.br:8080/jspui/bitstream/1/30617/7/aprendizadoreforcoveiculoguiado.pdf.jpg56d63ff77ad2c2792ddd821077689a54MD571/306172023-02-25 04:07:06.846oai:repositorio.utfpr.edu.br:1/30617TmEgcXVhbGlkYWRlIGRlIHRpdHVsYXIgZG9zIGRpcmVpdG9zIGRlIGF1dG9yIGRhIHB1YmxpY2HDp8OjbywgYXV0b3Jpem8gYSBVVEZQUiBhIHZlaWN1bGFyLCAKYXRyYXbDqXMgZG8gUG9ydGFsIGRlIEluZm9ybWHDp8OjbyBlbSBBY2Vzc28gQWJlcnRvIChQSUFBKSBlIGRvcyBDYXTDoWxvZ29zIGRhcyBCaWJsaW90ZWNhcyAKZGVzdGEgSW5zdGl0dWnDp8Ojbywgc2VtIHJlc3NhcmNpbWVudG8gZG9zIGRpcmVpdG9zIGF1dG9yYWlzLCBkZSBhY29yZG8gY29tIGEgTGVpIG5vIDkuNjEwLzk4LCAKbyB0ZXh0byBkZXN0YSBvYnJhLCBvYnNlcnZhbmRvIGFzIGNvbmRpw6fDtWVzIGRlIGRpc3BvbmliaWxpemHDp8OjbyByZWdpc3RyYWRhcyBubyBpdGVtIDQgZG8gCuKAnFRlcm1vIGRlIEF1dG9yaXphw6fDo28gcGFyYSBQdWJsaWNhw6fDo28gZGUgVHJhYmFsaG9zIGRlIENvbmNsdXPDo28gZGUgQ3Vyc28gZGUgR3JhZHVhw6fDo28gZSAKRXNwZWNpYWxpemHDp8OjbywgRGlzc2VydGHDp8O1ZXMgZSBUZXNlcyBubyBQb3J0YWwgZGUgSW5mb3JtYcOnw6NvIGUgbm9zIENhdMOhbG9nb3MgRWxldHLDtG5pY29zIGRvIApTaXN0ZW1hIGRlIEJpYmxpb3RlY2FzIGRhIFVURlBS4oCdLCBwYXJhIGZpbnMgZGUgbGVpdHVyYSwgaW1wcmVzc8OjbyBlL291IGRvd25sb2FkLCB2aXNhbmRvIGEgCmRpdnVsZ2HDp8OjbyBkYSBwcm9kdcOnw6NvIGNpZW50w61maWNhIGJyYXNpbGVpcmEuCgogIEFzIHZpYXMgb3JpZ2luYWlzIGUgYXNzaW5hZGFzIHBlbG8ocykgYXV0b3IoZXMpIGRvIOKAnFRlcm1vIGRlIEF1dG9yaXphw6fDo28gcGFyYSBQdWJsaWNhw6fDo28gZGUgClRyYWJhbGhvcyBkZSBDb25jbHVzw6NvIGRlIEN1cnNvIGRlIEdyYWR1YcOnw6NvIGUgRXNwZWNpYWxpemHDp8OjbywgRGlzc2VydGHDp8O1ZXMgZSBUZXNlcyBubyBQb3J0YWwgCmRlIEluZm9ybWHDp8OjbyBlIG5vcyBDYXTDoWxvZ29zIEVsZXRyw7RuaWNvcyBkbyBTaXN0ZW1hIGRlIEJpYmxpb3RlY2FzIGRhIFVURlBS4oCdIGUgZGEg4oCcRGVjbGFyYcOnw6NvIApkZSBBdXRvcmlh4oCdIGVuY29udHJhbS1zZSBhcnF1aXZhZGFzIG5hIEJpYmxpb3RlY2EgZG8gQ8OibXB1cyBubyBxdWFsIG8gdHJhYmFsaG8gZm9pIGRlZmVuZGlkby4gCk5vIGNhc28gZGUgcHVibGljYcOnw7VlcyBkZSBhdXRvcmlhIGNvbGV0aXZhIGUgbXVsdGljw6JtcHVzLCBvcyBkb2N1bWVudG9zIGZpY2Fyw6NvIHNvYiBndWFyZGEgZGEgCkJpYmxpb3RlY2EgY29tIGEgcXVhbCBvIOKAnHByaW1laXJvIGF1dG9y4oCdIHBvc3N1YSB2w61uY3Vsby4KRepositório de PublicaçõesPUBhttp://repositorio.utfpr.edu.br:8080/oai/requestopendoar:2023-02-25T06:07:06Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT)) - Universidade Tecnológica Federal do Paraná (UTFPR)false |
dc.title.pt_BR.fl_str_mv |
Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente |
dc.title.alternative.pt_BR.fl_str_mv |
Deep reinforcement learning applied to a automated guided vehicle |
title |
Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente |
spellingShingle |
Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente Welter, Alexsandro Reichert CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO Veículos - Controle automático Robôs Sistemas de veículos guiados automatizados Robótica Vehicles - Automatic control Robots Automated guided vehicle systems Robotics |
title_short |
Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente |
title_full |
Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente |
title_fullStr |
Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente |
title_full_unstemmed |
Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente |
title_sort |
Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente |
author |
Welter, Alexsandro Reichert |
author_facet |
Welter, Alexsandro Reichert |
author_role |
author |
dc.contributor.advisor1.fl_str_mv |
Marin, Luciene de Oliveira |
dc.contributor.advisor-co1.fl_str_mv |
Lima, Jeferson José de |
dc.contributor.referee1.fl_str_mv |
Marin, Luciene de Oliveira |
dc.contributor.referee2.fl_str_mv |
Lima, Jeferson José de |
dc.contributor.referee3.fl_str_mv |
Linares, Kathya Silvia Collazos |
dc.contributor.referee4.fl_str_mv |
Ortiz, Jorge Luis Roel |
dc.contributor.author.fl_str_mv |
Welter, Alexsandro Reichert |
contributor_str_mv |
Marin, Luciene de Oliveira Lima, Jeferson José de Marin, Luciene de Oliveira Lima, Jeferson José de Linares, Kathya Silvia Collazos Ortiz, Jorge Luis Roel |
dc.subject.cnpq.fl_str_mv |
CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO |
topic |
CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO Veículos - Controle automático Robôs Sistemas de veículos guiados automatizados Robótica Vehicles - Automatic control Robots Automated guided vehicle systems Robotics |
dc.subject.por.fl_str_mv |
Veículos - Controle automático Robôs Sistemas de veículos guiados automatizados Robótica Vehicles - Automatic control Robots Automated guided vehicle systems Robotics |
description |
Os veículos guiados automaticamente (AGVs) estão relacionados ao problema da navegação autônoma na logística interna, sendo essa uma área muito pertinente na indústria atual. Com a utilização de robôs móveis, que não precisam da atuação humana direta para o seu funcionamento, é possível reduzir custos, aumentar a eficiência e facilitar a manutenção de ambientes de logística interna. Dentre as várias soluções, existe o uso do aprendizado por reforço aplicado ao controle do robô. Essa técnica de aprendizado tem a característica de ter uma troca de informações entre o ambiente e o agente, com o agente buscando objetivos e o ambiente retornando recompensas para cada uma de suas ações. Tais características permitem que o aprendizado ocorra sem o conhecimento prévio do ambiente, sendo esse um grande diferencial para a área da robótica, pela sua adaptabilidade a ambientes dinâmicos e diversos. O presente trabalho tem o objetivo de avaliar o algoritmo Deep Q-learning (DQN) para o uso na navegação autônoma de um robô móvel em ambiente de simulação e realizar a análise dos resultados obtidos. |
publishDate |
2022 |
dc.date.issued.fl_str_mv |
2022-12-09 |
dc.date.accessioned.fl_str_mv |
2023-02-23T14:17:38Z |
dc.date.available.fl_str_mv |
2023-02-23T14:17:38Z |
dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
dc.type.driver.fl_str_mv |
info:eu-repo/semantics/bachelorThesis |
format |
bachelorThesis |
status_str |
publishedVersion |
dc.identifier.citation.fl_str_mv |
WELTER, Alexsandro Reichert. Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente. 2022. Trabalho de Conclusão de Curso (Bacharelado em Engenharia de Computação) - Universidade Tecnológica Federal do Paraná, Pato Branco, 2022. |
dc.identifier.uri.fl_str_mv |
http://repositorio.utfpr.edu.br/jspui/handle/1/30617 |
identifier_str_mv |
WELTER, Alexsandro Reichert. Aprendizado por reforço profundo para navegação de um veículo guiado automaticamente. 2022. Trabalho de Conclusão de Curso (Bacharelado em Engenharia de Computação) - Universidade Tecnológica Federal do Paraná, Pato Branco, 2022. |
url |
http://repositorio.utfpr.edu.br/jspui/handle/1/30617 |
dc.language.iso.fl_str_mv |
por |
language |
por |
dc.rights.driver.fl_str_mv |
http://creativecommons.org/licenses/by-sa/4.0/ info:eu-repo/semantics/openAccess |
rights_invalid_str_mv |
http://creativecommons.org/licenses/by-sa/4.0/ |
eu_rights_str_mv |
openAccess |
dc.publisher.none.fl_str_mv |
Universidade Tecnológica Federal do Paraná Pato Branco |
dc.publisher.program.fl_str_mv |
Engenharia de Computação |
dc.publisher.initials.fl_str_mv |
UTFPR |
dc.publisher.country.fl_str_mv |
Brasil |
dc.publisher.department.fl_str_mv |
Departamento Acadêmico de Informática |
publisher.none.fl_str_mv |
Universidade Tecnológica Federal do Paraná Pato Branco |
dc.source.none.fl_str_mv |
reponame:Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT)) instname:Universidade Tecnológica Federal do Paraná (UTFPR) instacron:UTFPR |
instname_str |
Universidade Tecnológica Federal do Paraná (UTFPR) |
instacron_str |
UTFPR |
institution |
UTFPR |
reponame_str |
Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT)) |
collection |
Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT)) |
bitstream.url.fl_str_mv |
http://repositorio.utfpr.edu.br:8080/jspui/bitstream/1/30617/1/aprendizadoreforcoveiculoguiado.pdf http://repositorio.utfpr.edu.br:8080/jspui/bitstream/1/30617/4/license_rdf http://repositorio.utfpr.edu.br:8080/jspui/bitstream/1/30617/5/license.txt http://repositorio.utfpr.edu.br:8080/jspui/bitstream/1/30617/6/aprendizadoreforcoveiculoguiado.pdf.txt http://repositorio.utfpr.edu.br:8080/jspui/bitstream/1/30617/7/aprendizadoreforcoveiculoguiado.pdf.jpg |
bitstream.checksum.fl_str_mv |
e08c196a043bc16d30dfd33171674cf6 84a900c9dd4b2a10095a94649e1ce116 b9d82215ab23456fa2d8b49c5df1b95b 346d710d60a58f296d2bb8089a9cdb3e 56d63ff77ad2c2792ddd821077689a54 |
bitstream.checksumAlgorithm.fl_str_mv |
MD5 MD5 MD5 MD5 MD5 |
repository.name.fl_str_mv |
Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT)) - Universidade Tecnológica Federal do Paraná (UTFPR) |
repository.mail.fl_str_mv |
|
_version_ |
1797043843604938752 |