2024-03-29T09:03:06Zhttps://www.tdx.cat/oai/requestoai:www.tdx.cat:10803/227212024-03-15T10:58:02Zcom_10803_236col_10803_690279
TDX (Tesis Doctorals en Xarxa)
author
Hazan, Amaury
authoremail
amaury.hazan@upf.edu
authoremailshow
true
director
Serra, Xavier
authorsendemail
true
2011-05-16T09:32:30Z
2011-05-16T09:32:30Z
2010-07-16
978-84-694-4286-9
http://hdl.handle.net/10803/22721
B.18242-2011
We develop in this thesis a computational model of music expectation, which may be one of the most important aspects in music listening. Many phenomenons related to music listening such as preference, surprise or emo- tions are linked to the anticipatory behaviour of listeners. In this thesis, we concentrate on a statistical account to music expectation, by modelling the processes of learning and predicting spectro-temporal regularities in a causal fashion.
The principle of statistical modelling of expectation can be applied to several music representations, from symbolic notation to audio signals. We first show that computational learning architectures can be used and evaluated to account behavioral data concerning auditory perception and learning. We then propose a what/when representation of musical events which enables to sequentially describe and learn the structure of acoustic units in musical audio signals.
The proposed representation is applied to describe and anticipate timbre features and musical rhythms. We suggest ways to exploit the properties of the expectation model in music analysis tasks such as structural segmentation. We finally explore the implications of our model for interactive music applications in the context of real-time transcription, concatenative synthesis, and visualization.
Esta tesis presenta un modelo computacional de expectativa musical, que es un aspecto muy importante de como procesamos la música que oímos. Muchos fenómenos relacionados con el procesamiento de la música están vinculados a una capacidad para anticipar la continuación de una pieza de música. Nos enfocaremos en un acercamiento estadístico de la expectativa musical, modelando los procesos de aprendizaje y de predicción de las regularidades espectro-temporales de forma causal.
El principio de modelado estadístico de la expectativa se puede aplicar a varias representaciones de estructuras musicales, desde las notaciones simbólicas a la señales de audio. Primero demostramos que ciertos algoritmos de aprendizaje de secuencias se pueden usar y evaluar en el contexto de la percepción y el aprendizaje de secuencias auditivas. Luego, proponemos una representación, denominada qué/cuándo, para representar eventos musicales de una forma que permite describir y aprender la estructura secuencial de unidades acústicas en señales de audio musical.
Aplicamos esta representación para describir y anticipar características tímbricas y ritmos. Sugerimos que se pueden explotar las propiedades del modelo de expectativa para resolver tareas de análisis como la segmentación estructural de piezas musicales. Finalmente, exploramos las implicaciones de nuestro modelo a la hora de definir nuevas aplicaciones en el contexto de la transcripción en tiempo real, la síntesis concatenativa y la visualización.
eng
Musical Expectation
music
prediction-driven modelling
computational modelling
sequential learning
auditory perception
audio signal processing
machine learning
sequential learning
Musical expectation modelling from audio : a causal mid-level approach to predictive representation and learning of spectro-temporal events
info:eu-repo/semantics/doctoralThesis info:eu-repo/semantics/publishedVersion
URL
https://www.tdx.cat/bitstream/10803/22721/1/tah.pdf
File
MD5
0f71a72944abfa23f9ab57a56738bef3
3962714
application/pdf
tah.pdf
URL
https://www.tdx.cat/bitstream/10803/22721/2/tah.pdf.txt
File
MD5
ec8d96a87fd7e61a87fcdc22e6d7061e
290126
text/plain
tah.pdf.txt