Musical brush : development and exploration of a tool that supports creativity by combining music with drawing

Detalhes bibliográficos
Autor(a) principal: Valer, Rafael
Data de Publicação: 2020
Tipo de documento: Dissertação
Idioma: eng
Título da fonte: Biblioteca Digital de Teses e Dissertações da UFRGS
Texto Completo: http://hdl.handle.net/10183/217857
Resumo: O uso de ferramentas digitais tornou-se comum em várias das nossas atividades diárias. Na música, a exploração da música digital tem aumentado continuamente desde o surgimento da música eletrônica e da síntese sonora nos anos 60, culminando, por exemplo, em uma ampla gama de instrumentos musicais disponíveis nos dias de hoje. Juntamente com novos dispositivos, os avanços na tecnologia em geral contribuíram para o surgimento de novas formas alternativas de interação e expressão musical. Exemplos incluem aplicativos musicais que exploram Realidade Aumentada, Mista e Virtual para visualização sonora em aplicativos móveis e que fazem uso de vários sensores para controlar parâmetros musicais. Neste trabalho, apresentamos o Musical Brush, um novo aplicativo artístico que combina música e desenho. O principal objetivo da aplicação é prover uma maneira fácil para usuários iniciantes comporem e se expressarem musicalmente. Musical Brush é projetado para dispositivos móveis e explora a Realidade Aumentada para criar uma representação visual da música em tempo real, fornecendo assim uma experiência extremamente expressiva e em uma configuração portátil através do uso de sensores incorporados em um smartphone. Em um primeiro estudo exploratório, coletamos opiniões gerais sobre Musical Brush em relação ao seu uso, sua interface e suas interações. A partir dos resultados, projetamos e desenvolvemos melhorias em algumas das interações que tem como objetivo controlar parâmetros musicais, as quais mostraram não ser tão intuitivas quanto esperado. Uma descoberta positiva foi o alto nível de envolvimento e satisfação dos participantes ao usarem a aplicação, causado principalmente pela capacidade de criar desenhos em três dimensões. Levando em consideração a forte relação entre Musical Brush e a ‘Criatividade’ durante o processo de composição, aliada ao crescente interesse por parte da comunidade de Interação Humano-Computador neste tópico, mais particularmente no estudo de Ferramentas de Suporte à Criatividade, propusemos uma segunda investigação focada em explorar a capacidade da ferramenta de auxiliar a criatividade em indivíduos. O estudo de usuário foi realizado comparando quatro versões diferentes de Musical Brush, analizando graus distintos de interação e feedback audiovisual. Demonstramos que nossa aplicação apresenta bons resultados no que diz respeito à capacidade de apoiar atributos relacionados à criatividade, tais como: ‘Resultados dignos de Esforço’, ‘Exploração’ e ‘Expressividade’. Entre os motivos, o feedback visual através de desenhos tridimensionais se mostrou como principal recurso responsável por tal contribuição.
id URGS_76e6bcc22fa0752b5485af416c22db10
oai_identifier_str oai:www.lume.ufrgs.br:10183/217857
network_acronym_str URGS
network_name_str Biblioteca Digital de Teses e Dissertações da UFRGS
repository_id_str 1853
spelling Valer, RafaelNedel, Luciana PorcherSchramm, Rodrigo2021-02-10T04:13:59Z2020http://hdl.handle.net/10183/217857001122314O uso de ferramentas digitais tornou-se comum em várias das nossas atividades diárias. Na música, a exploração da música digital tem aumentado continuamente desde o surgimento da música eletrônica e da síntese sonora nos anos 60, culminando, por exemplo, em uma ampla gama de instrumentos musicais disponíveis nos dias de hoje. Juntamente com novos dispositivos, os avanços na tecnologia em geral contribuíram para o surgimento de novas formas alternativas de interação e expressão musical. Exemplos incluem aplicativos musicais que exploram Realidade Aumentada, Mista e Virtual para visualização sonora em aplicativos móveis e que fazem uso de vários sensores para controlar parâmetros musicais. Neste trabalho, apresentamos o Musical Brush, um novo aplicativo artístico que combina música e desenho. O principal objetivo da aplicação é prover uma maneira fácil para usuários iniciantes comporem e se expressarem musicalmente. Musical Brush é projetado para dispositivos móveis e explora a Realidade Aumentada para criar uma representação visual da música em tempo real, fornecendo assim uma experiência extremamente expressiva e em uma configuração portátil através do uso de sensores incorporados em um smartphone. Em um primeiro estudo exploratório, coletamos opiniões gerais sobre Musical Brush em relação ao seu uso, sua interface e suas interações. A partir dos resultados, projetamos e desenvolvemos melhorias em algumas das interações que tem como objetivo controlar parâmetros musicais, as quais mostraram não ser tão intuitivas quanto esperado. Uma descoberta positiva foi o alto nível de envolvimento e satisfação dos participantes ao usarem a aplicação, causado principalmente pela capacidade de criar desenhos em três dimensões. Levando em consideração a forte relação entre Musical Brush e a ‘Criatividade’ durante o processo de composição, aliada ao crescente interesse por parte da comunidade de Interação Humano-Computador neste tópico, mais particularmente no estudo de Ferramentas de Suporte à Criatividade, propusemos uma segunda investigação focada em explorar a capacidade da ferramenta de auxiliar a criatividade em indivíduos. O estudo de usuário foi realizado comparando quatro versões diferentes de Musical Brush, analizando graus distintos de interação e feedback audiovisual. Demonstramos que nossa aplicação apresenta bons resultados no que diz respeito à capacidade de apoiar atributos relacionados à criatividade, tais como: ‘Resultados dignos de Esforço’, ‘Exploração’ e ‘Expressividade’. Entre os motivos, o feedback visual através de desenhos tridimensionais se mostrou como principal recurso responsável por tal contribuição.The use of digital tools has become a standard in several activities of our daily lives. In the music domain, the exploration of digital music has continuously increased since the rise of electronic music and sound synthesis back in the 60s, for example culminating in a wide range of musical instruments available nowadays. Along with new devices, the advancements in technology contributed to the emergence of alternative ways to interact and express music. Examples range from musical applications exploring Augmented, Mixed, and Virtual realities for sound visualization to mobile applications that make use of several sensors to control musical parameters. In this work, we introduce Musical Brush, a novel artistic application that combines music and drawing. The application’s main purpose is to provide an easy way for novice users to compose and express musically. Musical Brush is designed for mobile devices and explores Augmented Reality to create a visual representation of music in real-time. The application provides a very expressive experience in a portable setup through the use of the embedded sensors present in a smartphone. In a first exploratory study, we collect overview feedback regarding the usage, interface, and interactions. From the results, we designed and developed improvements on some of the application audiovisual mapping gestures, which were not perceived as intuitive as expected. A positive finding was the high level of user engagement and enjoyability while handling the application, mainly caused by the tool’s ability to draw in three dimensions. Taking into consideration the strong relation between Musical Brush and ‘Creativity’ during the improvisation process, allied with the growing interest of the Human-Computer Interaction community toward this topic, particularly in the study of Creativity Support Tools, we proposed a second investigation focused on exploring the capability of Musical Brush to support the creativity of individuals. The user study was carried out comparing four different versions of Musical Brush, analyzing distinct degrees of interaction and audiovisual feedback. We demonstrate that our application presents good results regarding the ability to support creativity-related attributes such as ‘Results Worth Effort’, ‘Exploration’, and ‘Expressiveness’. Among the reasons, the visual feedback through virtual three-dimension drawings was the key application feature responsible for this contribution.application/pdfengMúsicaDesenhoCriatividadeRealidade aumentadaInteração homem-computadorCreativity support toolsMusical brush : development and exploration of a tool that supports creativity by combining music with drawingMusical brush: desenvolvimento e exploração de uma ferramenta que apoia a criatividade combinando música com desenho info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisUniversidade Federal do Rio Grande do SulInstituto de InformáticaPrograma de Pós-Graduação em ComputaçãoPorto Alegre, BR-RS2020mestradoinfo:eu-repo/semantics/openAccessreponame:Biblioteca Digital de Teses e Dissertações da UFRGSinstname:Universidade Federal do Rio Grande do Sul (UFRGS)instacron:UFRGSTEXT001122314.pdf.txt001122314.pdf.txtExtracted Texttext/plain189615http://www.lume.ufrgs.br/bitstream/10183/217857/2/001122314.pdf.txt159d1824c835af0e93bc0cb95042788aMD52ORIGINAL001122314.pdfTexto completo (inglês)application/pdf42555564http://www.lume.ufrgs.br/bitstream/10183/217857/1/001122314.pdfb5f72fe18796afc847618a38d0b5fdb5MD5110183/2178572024-06-19 06:43:46.534702oai:www.lume.ufrgs.br:10183/217857Biblioteca Digital de Teses e Dissertaçõeshttps://lume.ufrgs.br/handle/10183/2PUBhttps://lume.ufrgs.br/oai/requestlume@ufrgs.br||lume@ufrgs.bropendoar:18532024-06-19T09:43:46Biblioteca Digital de Teses e Dissertações da UFRGS - Universidade Federal do Rio Grande do Sul (UFRGS)false
dc.title.pt_BR.fl_str_mv Musical brush : development and exploration of a tool that supports creativity by combining music with drawing
dc.title.alternative.en.fl_str_mv Musical brush: desenvolvimento e exploração de uma ferramenta que apoia a criatividade combinando música com desenho
title Musical brush : development and exploration of a tool that supports creativity by combining music with drawing
spellingShingle Musical brush : development and exploration of a tool that supports creativity by combining music with drawing
Valer, Rafael
Música
Desenho
Criatividade
Realidade aumentada
Interação homem-computador
Creativity support tools
title_short Musical brush : development and exploration of a tool that supports creativity by combining music with drawing
title_full Musical brush : development and exploration of a tool that supports creativity by combining music with drawing
title_fullStr Musical brush : development and exploration of a tool that supports creativity by combining music with drawing
title_full_unstemmed Musical brush : development and exploration of a tool that supports creativity by combining music with drawing
title_sort Musical brush : development and exploration of a tool that supports creativity by combining music with drawing
author Valer, Rafael
author_facet Valer, Rafael
author_role author
dc.contributor.author.fl_str_mv Valer, Rafael
dc.contributor.advisor1.fl_str_mv Nedel, Luciana Porcher
dc.contributor.advisor-co1.fl_str_mv Schramm, Rodrigo
contributor_str_mv Nedel, Luciana Porcher
Schramm, Rodrigo
dc.subject.por.fl_str_mv Música
Desenho
Criatividade
Realidade aumentada
Interação homem-computador
topic Música
Desenho
Criatividade
Realidade aumentada
Interação homem-computador
Creativity support tools
dc.subject.eng.fl_str_mv Creativity support tools
description O uso de ferramentas digitais tornou-se comum em várias das nossas atividades diárias. Na música, a exploração da música digital tem aumentado continuamente desde o surgimento da música eletrônica e da síntese sonora nos anos 60, culminando, por exemplo, em uma ampla gama de instrumentos musicais disponíveis nos dias de hoje. Juntamente com novos dispositivos, os avanços na tecnologia em geral contribuíram para o surgimento de novas formas alternativas de interação e expressão musical. Exemplos incluem aplicativos musicais que exploram Realidade Aumentada, Mista e Virtual para visualização sonora em aplicativos móveis e que fazem uso de vários sensores para controlar parâmetros musicais. Neste trabalho, apresentamos o Musical Brush, um novo aplicativo artístico que combina música e desenho. O principal objetivo da aplicação é prover uma maneira fácil para usuários iniciantes comporem e se expressarem musicalmente. Musical Brush é projetado para dispositivos móveis e explora a Realidade Aumentada para criar uma representação visual da música em tempo real, fornecendo assim uma experiência extremamente expressiva e em uma configuração portátil através do uso de sensores incorporados em um smartphone. Em um primeiro estudo exploratório, coletamos opiniões gerais sobre Musical Brush em relação ao seu uso, sua interface e suas interações. A partir dos resultados, projetamos e desenvolvemos melhorias em algumas das interações que tem como objetivo controlar parâmetros musicais, as quais mostraram não ser tão intuitivas quanto esperado. Uma descoberta positiva foi o alto nível de envolvimento e satisfação dos participantes ao usarem a aplicação, causado principalmente pela capacidade de criar desenhos em três dimensões. Levando em consideração a forte relação entre Musical Brush e a ‘Criatividade’ durante o processo de composição, aliada ao crescente interesse por parte da comunidade de Interação Humano-Computador neste tópico, mais particularmente no estudo de Ferramentas de Suporte à Criatividade, propusemos uma segunda investigação focada em explorar a capacidade da ferramenta de auxiliar a criatividade em indivíduos. O estudo de usuário foi realizado comparando quatro versões diferentes de Musical Brush, analizando graus distintos de interação e feedback audiovisual. Demonstramos que nossa aplicação apresenta bons resultados no que diz respeito à capacidade de apoiar atributos relacionados à criatividade, tais como: ‘Resultados dignos de Esforço’, ‘Exploração’ e ‘Expressividade’. Entre os motivos, o feedback visual através de desenhos tridimensionais se mostrou como principal recurso responsável por tal contribuição.
publishDate 2020
dc.date.issued.fl_str_mv 2020
dc.date.accessioned.fl_str_mv 2021-02-10T04:13:59Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://hdl.handle.net/10183/217857
dc.identifier.nrb.pt_BR.fl_str_mv 001122314
url http://hdl.handle.net/10183/217857
identifier_str_mv 001122314
dc.language.iso.fl_str_mv eng
language eng
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.source.none.fl_str_mv reponame:Biblioteca Digital de Teses e Dissertações da UFRGS
instname:Universidade Federal do Rio Grande do Sul (UFRGS)
instacron:UFRGS
instname_str Universidade Federal do Rio Grande do Sul (UFRGS)
instacron_str UFRGS
institution UFRGS
reponame_str Biblioteca Digital de Teses e Dissertações da UFRGS
collection Biblioteca Digital de Teses e Dissertações da UFRGS
bitstream.url.fl_str_mv http://www.lume.ufrgs.br/bitstream/10183/217857/2/001122314.pdf.txt
http://www.lume.ufrgs.br/bitstream/10183/217857/1/001122314.pdf
bitstream.checksum.fl_str_mv 159d1824c835af0e93bc0cb95042788a
b5f72fe18796afc847618a38d0b5fdb5
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
repository.name.fl_str_mv Biblioteca Digital de Teses e Dissertações da UFRGS - Universidade Federal do Rio Grande do Sul (UFRGS)
repository.mail.fl_str_mv lume@ufrgs.br||lume@ufrgs.br
_version_ 1810085543515521024