Treinamento multiobjetivo de perceptron de múltiplas camadas comrepresentação esférica de pesos

Detalhes bibliográficos
Autor(a) principal: Honovan Paz Rocha
Data de Publicação: 2017
Tipo de documento: Tese
Idioma: por
Título da fonte: Repositório Institucional da UFMG
Texto Completo: http://hdl.handle.net/1843/BUOS-ATQJX9
Resumo: This work presents a novel representation of artificial neural networks(ANN) multiobjective learning in which the weights are described basedon the Euclidean norm, which is taken as a measure of model complexity. Weights are projected into a new space defined by a radius r and a vector of angles. This spherical representation further simplifies the multi-objective learning problem whose estimated Paretooptimalset is obtained in classical approaches by the e-constrained method, minimizing error with multiple constrained values of norm. The corresponding constrained optimization problem is transformed into unconstrained ones, what simplifies formulation and computationalefforts, besides allowing that any nonlinear optimization method could be used to train the ANN. Results indicate that the proposed spherical weights representation yields more accurate estimates of the Pareto set when compared to the classical multi-objective approach. Regarding the final solution taken from the Pareto set, our approach showed effectiveness, outperforming some state-of-the-art methods in several datasets based on Friedman's test.
id UFMG_4829fcf1110d509af395ee72fd3f5402
oai_identifier_str oai:repositorio.ufmg.br:1843/BUOS-ATQJX9
network_acronym_str UFMG
network_name_str Repositório Institucional da UFMG
repository_id_str
spelling Treinamento multiobjetivo de perceptron de múltiplas camadas comrepresentação esférica de pesosPerceptron de múltiplas camadasPesos esféricosAlgoritmos de treinamento esféricosAprendizado multiobjetivoEngenharia elétricaRedes neurais (Computação)PerceptronsThis work presents a novel representation of artificial neural networks(ANN) multiobjective learning in which the weights are described basedon the Euclidean norm, which is taken as a measure of model complexity. Weights are projected into a new space defined by a radius r and a vector of angles. This spherical representation further simplifies the multi-objective learning problem whose estimated Paretooptimalset is obtained in classical approaches by the e-constrained method, minimizing error with multiple constrained values of norm. The corresponding constrained optimization problem is transformed into unconstrained ones, what simplifies formulation and computationalefforts, besides allowing that any nonlinear optimization method could be used to train the ANN. Results indicate that the proposed spherical weights representation yields more accurate estimates of the Pareto set when compared to the classical multi-objective approach. Regarding the final solution taken from the Pareto set, our approach showed effectiveness, outperforming some state-of-the-art methods in several datasets based on Friedman's test.Este trabalho apresenta uma nova representação para o aprendizadomultiobjetivo de redes neurais artifiiciais (RNA), onde os pesos sãodescritos com base na norma Euclidiana, que é tomada como umamedida da complexidade do modelo. Os pesos são projetados emum novo espaço definido por um raio r e um vetor de ângulos . Esta representação esférica simplifica ainda mais o problema de aprendizado multiobjetivo, cujo conjunto Pareto-ótimo estimado é obtidoutilizando-se o método e-restrito nas abordagens clássicas, minimizando o erro com múltiplos valores restritos de norma. O correspondente problema de otimização com restrições é transformado em vários problemas irrestritos, o que simplifica a formulação e esforço computacional, além de permitir que qualquer método de otimização não-linear possa ser utilizado para treinar a RNA. Os resultados indicam que a representação esférica de pesos proposta gera estimativas do conjunto Pareto mais precisas quando comparada à abordagem multiobjetivo clássica. Com relação à solução final obtida a partir do conjunto Pareto, a abordagem esférica mostrou eficácia com base no teste de Friedman, superando alguns métodos do estado da arte em vários conjuntos de dados.Universidade Federal de Minas GeraisUFMGAntonio de Padua BragaMarcelo Azevedo CostaLuiz Enrique ZarateRodney Rezende SaldanhaRobert HolteHaroldo Fraga de Campos VelhoHonovan Paz Rocha2019-08-10T20:44:09Z2019-08-10T20:44:09Z2017-02-17info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesisapplication/pdfhttp://hdl.handle.net/1843/BUOS-ATQJX9info:eu-repo/semantics/openAccessporreponame:Repositório Institucional da UFMGinstname:Universidade Federal de Minas Gerais (UFMG)instacron:UFMG2019-11-14T09:25:30Zoai:repositorio.ufmg.br:1843/BUOS-ATQJX9Repositório InstitucionalPUBhttps://repositorio.ufmg.br/oairepositorio@ufmg.bropendoar:2019-11-14T09:25:30Repositório Institucional da UFMG - Universidade Federal de Minas Gerais (UFMG)false
dc.title.none.fl_str_mv Treinamento multiobjetivo de perceptron de múltiplas camadas comrepresentação esférica de pesos
title Treinamento multiobjetivo de perceptron de múltiplas camadas comrepresentação esférica de pesos
spellingShingle Treinamento multiobjetivo de perceptron de múltiplas camadas comrepresentação esférica de pesos
Honovan Paz Rocha
Perceptron de múltiplas camadas
Pesos esféricos
Algoritmos de treinamento esféricos
Aprendizado multiobjetivo
Engenharia elétrica
Redes neurais (Computação)
Perceptrons
title_short Treinamento multiobjetivo de perceptron de múltiplas camadas comrepresentação esférica de pesos
title_full Treinamento multiobjetivo de perceptron de múltiplas camadas comrepresentação esférica de pesos
title_fullStr Treinamento multiobjetivo de perceptron de múltiplas camadas comrepresentação esférica de pesos
title_full_unstemmed Treinamento multiobjetivo de perceptron de múltiplas camadas comrepresentação esférica de pesos
title_sort Treinamento multiobjetivo de perceptron de múltiplas camadas comrepresentação esférica de pesos
author Honovan Paz Rocha
author_facet Honovan Paz Rocha
author_role author
dc.contributor.none.fl_str_mv Antonio de Padua Braga
Marcelo Azevedo Costa
Luiz Enrique Zarate
Rodney Rezende Saldanha
Robert Holte
Haroldo Fraga de Campos Velho
dc.contributor.author.fl_str_mv Honovan Paz Rocha
dc.subject.por.fl_str_mv Perceptron de múltiplas camadas
Pesos esféricos
Algoritmos de treinamento esféricos
Aprendizado multiobjetivo
Engenharia elétrica
Redes neurais (Computação)
Perceptrons
topic Perceptron de múltiplas camadas
Pesos esféricos
Algoritmos de treinamento esféricos
Aprendizado multiobjetivo
Engenharia elétrica
Redes neurais (Computação)
Perceptrons
description This work presents a novel representation of artificial neural networks(ANN) multiobjective learning in which the weights are described basedon the Euclidean norm, which is taken as a measure of model complexity. Weights are projected into a new space defined by a radius r and a vector of angles. This spherical representation further simplifies the multi-objective learning problem whose estimated Paretooptimalset is obtained in classical approaches by the e-constrained method, minimizing error with multiple constrained values of norm. The corresponding constrained optimization problem is transformed into unconstrained ones, what simplifies formulation and computationalefforts, besides allowing that any nonlinear optimization method could be used to train the ANN. Results indicate that the proposed spherical weights representation yields more accurate estimates of the Pareto set when compared to the classical multi-objective approach. Regarding the final solution taken from the Pareto set, our approach showed effectiveness, outperforming some state-of-the-art methods in several datasets based on Friedman's test.
publishDate 2017
dc.date.none.fl_str_mv 2017-02-17
2019-08-10T20:44:09Z
2019-08-10T20:44:09Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/doctoralThesis
format doctoralThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://hdl.handle.net/1843/BUOS-ATQJX9
url http://hdl.handle.net/1843/BUOS-ATQJX9
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Universidade Federal de Minas Gerais
UFMG
publisher.none.fl_str_mv Universidade Federal de Minas Gerais
UFMG
dc.source.none.fl_str_mv reponame:Repositório Institucional da UFMG
instname:Universidade Federal de Minas Gerais (UFMG)
instacron:UFMG
instname_str Universidade Federal de Minas Gerais (UFMG)
instacron_str UFMG
institution UFMG
reponame_str Repositório Institucional da UFMG
collection Repositório Institucional da UFMG
repository.name.fl_str_mv Repositório Institucional da UFMG - Universidade Federal de Minas Gerais (UFMG)
repository.mail.fl_str_mv repositorio@ufmg.br
_version_ 1816829888817004544