Estudi de casos pel control de síntesi d’instruments musicals virtuals mitjançant la veu cantada

Report for the scientific sojourn carried out at the Music Technology Area (Sound Processing and Control Lab), Faculty of Music, McGill University, Montreal, Canada, from October to December 2005.The aim of this research is to study the singing voice for controlling virtual musical instrument synthesis. It includes analysis and synthesis algorithms based on spectral audio processing. After digitalising the acoustic voice signal in the computer, a number of expressive descriptors of the singer are extracted. This process is achieved synchronously, thus all the nuance of the singer performance have been tracked. In a second stage, the extracted parameters are mapped to a sound synthesizer, the so-called digital musical instruments. In order achieve it, several tests with music students of the Faculty of Music, McGill University have been developed. These experiments have contributed to evaluate the system and to derive new control strategies to integrate: clarinet synthesis, bass guitar, visual representation of voice signals.

Estudi realitzat a partir d’una estada a la Music Technology Area (Sound Processing and Control Lab), Faculty of Music, McGill University, Montreal, Canadà, entre els mesos d’octubre a desembre del 2005. S’estudia la veu cantada com a eina per controlar la síntesi d’un instrument musical virtual. Aquest procés inclou dissenyar i la implementar d’algoritmes d’anàlisis i de síntesi basats en tècniques espectrals de processament digital del senyal. Un cop digitalitzat el senyal acústic de la veu, s’analitzarà el senyal i s’extrauran una sèrie de paràmetres expressius d’alt nivell de l’acció del cantant. Aquest procés es realitza sincrònicament a interval petits de temps, de manera que a cada instant disposarem de diversos paràmetres que ens modelaran l’acció del cantant. En una segona fase, aquests paràmetres s’assignaran als controls d’un sintetitzador de so, l’instrument musical virtual. Per aconseguir-ho, s’han desenvolupat experiments amb estudiants de música de la facultat de música de la McGill University. Aquestes proves han contribuït a avaluar el sistema per extreure’n noves pautes de control per integrar al clarinet, al baix i a la representació visual de les senyals vocals.