Aplicação de técnicas de aprendizado por reforço à alocação de recursos e ao escalonamento de usuários em sistemas de telecomunicações

Detalhes bibliográficos
Autor(a) principal: Leite, João Paulo
Data de Publicação: 2014
Tipo de documento: Tese
Idioma: por
Título da fonte: Repositório Institucional da UnB
Texto Completo: http://repositorio.unb.br/handle/10482/16916
Resumo: Tese (doutorado)—Universidade de Brasília, Faculdade de Tecnologia, Departamento de Engenharia Elétrica, 2014.
id UNB_f4995bdd0efa26a9cb102301b59983c2
oai_identifier_str oai:repositorio.unb.br:10482/16916
network_acronym_str UNB
network_name_str Repositório Institucional da UnB
repository_id_str
spelling Aplicação de técnicas de aprendizado por reforço à alocação de recursos e ao escalonamento de usuários em sistemas de telecomunicaçõesAprendizagemUsuáriosSistemas de telecomunicaçõesTese (doutorado)—Universidade de Brasília, Faculdade de Tecnologia, Departamento de Engenharia Elétrica, 2014.A adaptação de enlace e o escalonamento de usuários são aspectos cruciais dos atuais sistemas de comunicação devido à demanda por alta eficiência espectral, de forma a se obter a maior vazão possível com base nos recursos espectrais disponíveis, e à grande variedade de aplicações de usuário, cada uma com diferentes requisitos de qualidade de serviço. A implantação tanto da adaptação de enlace quanto de algoritmos de seleção e escalonamento de usuários impõe certos desafios, pois as soluções atualmente utilizadas consideram modelos idealizados de terminais de transmissão e de recepção, bem como um canal de comunicação de natureza invariante explicações cujas exigências são imutáveis.Nesse contexto, técnicas de aprendizado de máquina podem ser utilizadas como uma forma de superar as limitações impostas pelas técnicas tradicionais de modelagem e solução analítica dos problemas supracitados. Este trabalho apresenta como primeira contribuição uma solução para o problema de adaptação de enlace por modulação e codificação adaptativas em sistemas multiportadora utilizando técnicas de aprendizado por reforço por estados contínuos. Comosegunda contribuição, ainda com respeito à adaptação de enlace, o trabalho propõe a utilização do aprendizado por reforço para a solução do problema de bit loading em sistemas multiportadora.Como terceira contribuição, o trabalho propõe um algoritmo de seleção e escalonamento deusuários baseado na estratégia de aprendizado por reforço multi-objetivo, como uma forma delidar com os diferentes requisitos de qualidade de serviço que são impostos pela heterogeneidadedas aplicações que trafegam nas redes de comunicação atuais. Em particular, é considerado o problema de escalonamento de tráfego sensível ao atraso. Resultados de simulação mostram que as soluções propostas, baseadas em aprendizado por reforço, são capazes de explorar a variabilidade do meio de transmissão, de forma a suplantar as perdas que são introduzidas pela modelagem idealizada dos terminais de comunicação. _______________________________________________________________________________________ ABSTRACTLink adaptation and scheduling are crucial aspects of communication systems since highspectral efficiency is required in order to obtain the highest throughput given the availablespectrum resources and base stations should be able to service a wide range of quality of servicerequirements.In this context, machine learning techniques can be used as a way to overcome thelimitations imposed by traditional modeling techniques of the aforementioned problems. The firstcontribution of this thesis is to propose a solution to the problem of link adaptation for adaptivemodulation and coding in multicarrier systems using a continuous-state reinforcement learningapproach. As a second contribution, this thesis presents a solution to the bit loading problem inmulticarrier systems by means of reinforcement learning.As a third contribution, an algorithm for user selection and scheduling based on multiobjectivereinforcement is proposed. In particular, the scheduling of delay-sensitive traffic isconsidered. Simulation results show that the proposed solutions, based on reinforcement learning,are able to exploit the variability of the transmission medium and overcome the losses that areintroduced by idealized models of communication terminals and the communication channel.Carvalho, Paulo Henrique Portela deLeite, João Paulo2014-11-18T13:35:12Z2014-11-18T13:35:12Z2014-11-182014-05-30info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesisapplication/pdfLEITE, João Paulo. Aplicação de técnicas de aprendizado por reforço à alocação de recursos e ao escalonamento de usuários em sistemas de telecomunicações. 2014. viii, 131 f., il. Tese (Doutorado em Engenharia Elétrica)—Universidade de Brasília, Brasília, 2014.http://repositorio.unb.br/handle/10482/16916A concessão da licença deste item refere-se ao termo de autorização impresso assinado pelo autor com as seguintes condições: Na qualidade de titular dos direitos de autor da publicação, autorizo a Universidade de Brasília e o IBICT a disponibilizar por meio dos sites www.bce.unb.br, www.ibict.br, http://hercules.vtls.com/cgi-bin/ndltd/chameleon?lng=pt&skin=ndltd sem ressarcimento dos direitos autorais, de acordo com a Lei nº 9610/98, o texto integral da obra disponibilizada, conforme permissões assinaladas, para fins de leitura, impressão e/ou download, a título de divulgação da produção científica brasileira, a partir desta data.info:eu-repo/semantics/openAccessporreponame:Repositório Institucional da UnBinstname:Universidade de Brasília (UnB)instacron:UNB2023-07-07T21:09:50Zoai:repositorio.unb.br:10482/16916Repositório InstitucionalPUBhttps://repositorio.unb.br/oai/requestrepositorio@unb.bropendoar:2023-07-07T21:09:50Repositório Institucional da UnB - Universidade de Brasília (UnB)false
dc.title.none.fl_str_mv Aplicação de técnicas de aprendizado por reforço à alocação de recursos e ao escalonamento de usuários em sistemas de telecomunicações
title Aplicação de técnicas de aprendizado por reforço à alocação de recursos e ao escalonamento de usuários em sistemas de telecomunicações
spellingShingle Aplicação de técnicas de aprendizado por reforço à alocação de recursos e ao escalonamento de usuários em sistemas de telecomunicações
Leite, João Paulo
Aprendizagem
Usuários
Sistemas de telecomunicações
title_short Aplicação de técnicas de aprendizado por reforço à alocação de recursos e ao escalonamento de usuários em sistemas de telecomunicações
title_full Aplicação de técnicas de aprendizado por reforço à alocação de recursos e ao escalonamento de usuários em sistemas de telecomunicações
title_fullStr Aplicação de técnicas de aprendizado por reforço à alocação de recursos e ao escalonamento de usuários em sistemas de telecomunicações
title_full_unstemmed Aplicação de técnicas de aprendizado por reforço à alocação de recursos e ao escalonamento de usuários em sistemas de telecomunicações
title_sort Aplicação de técnicas de aprendizado por reforço à alocação de recursos e ao escalonamento de usuários em sistemas de telecomunicações
author Leite, João Paulo
author_facet Leite, João Paulo
author_role author
dc.contributor.none.fl_str_mv Carvalho, Paulo Henrique Portela de
dc.contributor.author.fl_str_mv Leite, João Paulo
dc.subject.por.fl_str_mv Aprendizagem
Usuários
Sistemas de telecomunicações
topic Aprendizagem
Usuários
Sistemas de telecomunicações
description Tese (doutorado)—Universidade de Brasília, Faculdade de Tecnologia, Departamento de Engenharia Elétrica, 2014.
publishDate 2014
dc.date.none.fl_str_mv 2014-11-18T13:35:12Z
2014-11-18T13:35:12Z
2014-11-18
2014-05-30
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/doctoralThesis
format doctoralThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv LEITE, João Paulo. Aplicação de técnicas de aprendizado por reforço à alocação de recursos e ao escalonamento de usuários em sistemas de telecomunicações. 2014. viii, 131 f., il. Tese (Doutorado em Engenharia Elétrica)—Universidade de Brasília, Brasília, 2014.
http://repositorio.unb.br/handle/10482/16916
identifier_str_mv LEITE, João Paulo. Aplicação de técnicas de aprendizado por reforço à alocação de recursos e ao escalonamento de usuários em sistemas de telecomunicações. 2014. viii, 131 f., il. Tese (Doutorado em Engenharia Elétrica)—Universidade de Brasília, Brasília, 2014.
url http://repositorio.unb.br/handle/10482/16916
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.source.none.fl_str_mv reponame:Repositório Institucional da UnB
instname:Universidade de Brasília (UnB)
instacron:UNB
instname_str Universidade de Brasília (UnB)
instacron_str UNB
institution UNB
reponame_str Repositório Institucional da UnB
collection Repositório Institucional da UnB
repository.name.fl_str_mv Repositório Institucional da UnB - Universidade de Brasília (UnB)
repository.mail.fl_str_mv repositorio@unb.br
_version_ 1810580807456129024