Redes neurais e padrões correlacionados

Detalhes bibliográficos
Autor(a) principal: Erichsen Junior, Rubem
Data de Publicação: 1991
Tipo de documento: Tese
Idioma: por
Título da fonte: Biblioteca Digital de Teses e Dissertações da UFRGS
Texto Completo: http://hdl.handle.net/10183/36750
Resumo: Estudamos os efeitos gerais que a 'correlação', definida como superposição entre os padrões exerce sobre as propriedades de equilíbrio de redes neurais atratoras. Inicialmente, estudamos analiticamente o modelo de Hopfield de memória associativa, com um número finito de padrões armazenados de acordo com a regra de Hebb. Determinamos as propriedades de recuperação dos estados que apresentam uma superposição assimétrica com mais de um padrão (estados mistos assimétricos). Os diagramas de fase demonstram que estes estados são relevantes se a quantidade de ruido na rede e a correlação entre os padrões não são ambas demasiado grandes. Estudamos a capacidade de armazenamento a = P/N em uma rede com a inclusão de P — p padrões não correlacionados, e obtivemos resultados para a, crítico, que corresponde ao valor de a acima do qual não há mais estados de recuperação. Efetuamos simulações numéricas para discutir a qualidade da recuperação e a dimensão das bacias de atração. Na segunda parte do trabalho, estudamos as propriedades de armazenamento de padrões correlacionados acima do limite de saturação, em redes neurais de Gardner—Derrida com sinapses contínuas ótimas. Utilizando o método de réplicas para calcular médias configuracionais na rede de neurônios, determinamos, na teoria de simetria de réplicas, a fração mínima de padrões erroneamente armazenados por neurônio e a capacidade de armazenamento crítica como função das correlações. Estudamos a estabilidade destas soluções, e verificamos que a quebra de simetria de réplicas é relevante. Finalmente, apresentamos um estudo preliminar dos efeitos de quebra de simetria de réplicas na ordem mais baixa do esquema iterativo de Parisi para vidros de spin.
id URGS_81fd2205e15e0db7fb195ca9adc57bcb
oai_identifier_str oai:www.lume.ufrgs.br:10183/36750
network_acronym_str URGS
network_name_str Biblioteca Digital de Teses e Dissertações da UFRGS
repository_id_str 1853
spelling Erichsen Junior, RubemTheumann, Walter Karl2012-01-20T01:19:40Z1991http://hdl.handle.net/10183/36750000152150Estudamos os efeitos gerais que a 'correlação', definida como superposição entre os padrões exerce sobre as propriedades de equilíbrio de redes neurais atratoras. Inicialmente, estudamos analiticamente o modelo de Hopfield de memória associativa, com um número finito de padrões armazenados de acordo com a regra de Hebb. Determinamos as propriedades de recuperação dos estados que apresentam uma superposição assimétrica com mais de um padrão (estados mistos assimétricos). Os diagramas de fase demonstram que estes estados são relevantes se a quantidade de ruido na rede e a correlação entre os padrões não são ambas demasiado grandes. Estudamos a capacidade de armazenamento a = P/N em uma rede com a inclusão de P — p padrões não correlacionados, e obtivemos resultados para a, crítico, que corresponde ao valor de a acima do qual não há mais estados de recuperação. Efetuamos simulações numéricas para discutir a qualidade da recuperação e a dimensão das bacias de atração. Na segunda parte do trabalho, estudamos as propriedades de armazenamento de padrões correlacionados acima do limite de saturação, em redes neurais de Gardner—Derrida com sinapses contínuas ótimas. Utilizando o método de réplicas para calcular médias configuracionais na rede de neurônios, determinamos, na teoria de simetria de réplicas, a fração mínima de padrões erroneamente armazenados por neurônio e a capacidade de armazenamento crítica como função das correlações. Estudamos a estabilidade destas soluções, e verificamos que a quebra de simetria de réplicas é relevante. Finalmente, apresentamos um estudo preliminar dos efeitos de quebra de simetria de réplicas na ordem mais baixa do esquema iterativo de Parisi para vidros de spin.We studied here the general effects that the 'correlation', defined as the overlap among the set of stored patterns causes to the equilibrium properties of atractor neural networks. Initially, the Hopfield model for associative memory was studied analitically with a finite number of patterns stored according to the Hebb learning rule. The retrieval properties of states that show an asymmetric overlap with more than one stored pattern (asymmetric mixed states) were determined. The phase diagrams for the overlaps demonstrate that these states are relevant if the amount of thermal noise is not too large and the correlations are not too strong. The storage capacity a = P/N is considered in a network with the adition of P — p uncorrelated patterns and results are given for the critical ac. This corresponds to the value of cx above wich the retrieval state is no longer present. Numerical simulations are carried out to discuss the retrieval quality and the size of the basins of attraction of the network. In the second part of the work, we studied the storage properties of correlated patterns, in the saturation regime, in Gardner—Derrida neural networks with optimal, continuous synapses. The average over quenched disorder were performed with the replica method, and the minimal fraction of storage errors 'per neuron' and the critical storage capacity in function of the corelations were calculated in the replica symmetry theory. We studied the stability in the space of replicas of these solutions, verifying that the symmetry breaking is relevant. Finally, we show a preliminar study of the replica symmetry breaking effects in the first order of the iterative Parisi's scheme for spin glasses.application/pdfporBiofísicaRedes neuraisRedes neurais e padrões correlacionadosinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesisUniversidade Federal do Rio Grande do SulInstituto de FísicaCurso de Pós-Graduação em FísicaPorto Alegre, BR-RS1991doutoradoinfo:eu-repo/semantics/openAccessreponame:Biblioteca Digital de Teses e Dissertações da UFRGSinstname:Universidade Federal do Rio Grande do Sul (UFRGS)instacron:UFRGSORIGINAL000152150.pdf000152150.pdfTexto completoapplication/pdf1020822http://www.lume.ufrgs.br/bitstream/10183/36750/1/000152150.pdf22232cf3b119bbb1f5678a2d3dda606cMD51TEXT000152150.pdf.txt000152150.pdf.txtExtracted Texttext/plain143690http://www.lume.ufrgs.br/bitstream/10183/36750/2/000152150.pdf.txt3ce9f61cab318fb05c4be868d0df0f90MD52THUMBNAIL000152150.pdf.jpg000152150.pdf.jpgGenerated Thumbnailimage/jpeg1185http://www.lume.ufrgs.br/bitstream/10183/36750/3/000152150.pdf.jpgac55dac2e2b5a84b90f538ba08ba2ed1MD5310183/367502018-10-11 08:25:00.358oai:www.lume.ufrgs.br:10183/36750Biblioteca Digital de Teses e Dissertaçõeshttps://lume.ufrgs.br/handle/10183/2PUBhttps://lume.ufrgs.br/oai/requestlume@ufrgs.br||lume@ufrgs.bropendoar:18532018-10-11T11:25Biblioteca Digital de Teses e Dissertações da UFRGS - Universidade Federal do Rio Grande do Sul (UFRGS)false
dc.title.pt_BR.fl_str_mv Redes neurais e padrões correlacionados
title Redes neurais e padrões correlacionados
spellingShingle Redes neurais e padrões correlacionados
Erichsen Junior, Rubem
Biofísica
Redes neurais
title_short Redes neurais e padrões correlacionados
title_full Redes neurais e padrões correlacionados
title_fullStr Redes neurais e padrões correlacionados
title_full_unstemmed Redes neurais e padrões correlacionados
title_sort Redes neurais e padrões correlacionados
author Erichsen Junior, Rubem
author_facet Erichsen Junior, Rubem
author_role author
dc.contributor.author.fl_str_mv Erichsen Junior, Rubem
dc.contributor.advisor1.fl_str_mv Theumann, Walter Karl
contributor_str_mv Theumann, Walter Karl
dc.subject.por.fl_str_mv Biofísica
Redes neurais
topic Biofísica
Redes neurais
description Estudamos os efeitos gerais que a 'correlação', definida como superposição entre os padrões exerce sobre as propriedades de equilíbrio de redes neurais atratoras. Inicialmente, estudamos analiticamente o modelo de Hopfield de memória associativa, com um número finito de padrões armazenados de acordo com a regra de Hebb. Determinamos as propriedades de recuperação dos estados que apresentam uma superposição assimétrica com mais de um padrão (estados mistos assimétricos). Os diagramas de fase demonstram que estes estados são relevantes se a quantidade de ruido na rede e a correlação entre os padrões não são ambas demasiado grandes. Estudamos a capacidade de armazenamento a = P/N em uma rede com a inclusão de P — p padrões não correlacionados, e obtivemos resultados para a, crítico, que corresponde ao valor de a acima do qual não há mais estados de recuperação. Efetuamos simulações numéricas para discutir a qualidade da recuperação e a dimensão das bacias de atração. Na segunda parte do trabalho, estudamos as propriedades de armazenamento de padrões correlacionados acima do limite de saturação, em redes neurais de Gardner—Derrida com sinapses contínuas ótimas. Utilizando o método de réplicas para calcular médias configuracionais na rede de neurônios, determinamos, na teoria de simetria de réplicas, a fração mínima de padrões erroneamente armazenados por neurônio e a capacidade de armazenamento crítica como função das correlações. Estudamos a estabilidade destas soluções, e verificamos que a quebra de simetria de réplicas é relevante. Finalmente, apresentamos um estudo preliminar dos efeitos de quebra de simetria de réplicas na ordem mais baixa do esquema iterativo de Parisi para vidros de spin.
publishDate 1991
dc.date.issued.fl_str_mv 1991
dc.date.accessioned.fl_str_mv 2012-01-20T01:19:40Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/doctoralThesis
format doctoralThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://hdl.handle.net/10183/36750
dc.identifier.nrb.pt_BR.fl_str_mv 000152150
url http://hdl.handle.net/10183/36750
identifier_str_mv 000152150
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.source.none.fl_str_mv reponame:Biblioteca Digital de Teses e Dissertações da UFRGS
instname:Universidade Federal do Rio Grande do Sul (UFRGS)
instacron:UFRGS
instname_str Universidade Federal do Rio Grande do Sul (UFRGS)
instacron_str UFRGS
institution UFRGS
reponame_str Biblioteca Digital de Teses e Dissertações da UFRGS
collection Biblioteca Digital de Teses e Dissertações da UFRGS
bitstream.url.fl_str_mv http://www.lume.ufrgs.br/bitstream/10183/36750/1/000152150.pdf
http://www.lume.ufrgs.br/bitstream/10183/36750/2/000152150.pdf.txt
http://www.lume.ufrgs.br/bitstream/10183/36750/3/000152150.pdf.jpg
bitstream.checksum.fl_str_mv 22232cf3b119bbb1f5678a2d3dda606c
3ce9f61cab318fb05c4be868d0df0f90
ac55dac2e2b5a84b90f538ba08ba2ed1
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
repository.name.fl_str_mv Biblioteca Digital de Teses e Dissertações da UFRGS - Universidade Federal do Rio Grande do Sul (UFRGS)
repository.mail.fl_str_mv lume@ufrgs.br||lume@ufrgs.br
_version_ 1800309012728643584