Search

International audience

International audience

International audience

Universität für Musik und darstellende Kunst Wien

This paper presents a study of bimanual control applied tosound synthesis. This study deals with coordination,cooperation, and abilities of our hands in musical context. Wedescribe examples of instruments made using subtractivesynthesis, scanned synthesis in Max/MSP and commercialstand-alone software synthesizers via MIDI communicationprotocol. These instruments have been designed according to amulti-layer-mapping model, which provides modular design.They have been used in concerts and performanceconsiderations are discussed too.

In this paper, we describe a new interface for musicalperformance, using the interaction with a graphical userinterface in a powerful manner: the user directly touches ascreen where graphical objects are displayed and can useseveral fingers simultaneously to interact with the objects. Theconcept of this interface is based on the superposition of thegesture spatial place and the visual feedback spatial place; i tgives the impression that the graphical objects are real. Thisconcept enables a huge freedom in designing interfaces. Thegesture device we have created gives the position of fourfingertips using 3D sensors and the data is performed in theMax/MSP environment. We have realized two practicalexamples of musical use of such a device, using PhotosonicSynthesis and Scanned Synthesis.

In this paper we describe the digital emulation of a optical photosonic instrument. First we briefly describe theoptical instrument which is the basis of this emulation.Then we give a musical description of the instrument implementation and its musical use and we concludewith the "duo" possibility of such an emulation.

International audience; L'un des auteurs (Jean-Claude Risset) présente son oeuvre Resonant Sound Spaces, créée le 24 mai 2002 à Marseille. Pour la réalisation de cette oeuvre, il a bénéficié à des titres divers de la collaboration des autres auteurs. Denis Lorrain a explicité de façon complète les structures sonores utilisées par Risset dans une oeuvre antérieure, Inharmonique, réalisée en 1977 avec le logiciel de synthèse temps différé MusicV. À partir de cette description, Antonio de Sousa Dias a programmé sur Max-MSP des mises en oeuvre de ces structures fonctionnant en temps réel. Daniel Arfib y a adjoint des contrôles en temps réel et des filtrages résonnants. Grâce à ces possibilités, Jean-Claude Risset a pu tirer parti de l'interaction temps réel pour réaliser Resonant Soundscapes, oeuvre 2 pistes sur support. La dernière étape aboutit à Resonant Sound Spaces, oeuvre 8 pistes, grâce au système de spatialisation Holophon conçu et réalisé par Laurent Pottier. La présentation illustrera les démarches par des exemples sonores dont plusieurs seront réalisés en temps réel.

International audience; Développée à partir d'un procédé graphique et lumineux de génération du son, la synthèse photosonique connaît aujourd'hui un nouveau développement, celui d'une version numérique de l'instrument photosonique. Le "simulateur numérique de disque photosonique", dans lequel le disque est devenu invisible, justifie paradoxalement plus que jamais l'intérêt acoustique de l' approche géométrique des ondes sonores de l'instrument optique original. Après une description des principes de la synthèse photosonique et de son émulation numérique, nous montrerons des exemples de confection de disques et comparerons les ressources sonores et les contrôles gestuels offerts par les deux types d'instruments.

International audience

International audience

Nous présentons ici quelques orientations qui gouvernent une action européenne intitulée COST G6 : "digital audio effects". Plus particulièrement nous faisons un récapitulatif des conférences DAFx98 et DAFx99 qui ont eu lieu respectivement à Barcelone (Espagne) et Trondheim (Norvège), avec une indication des tendances qui se dégagent de ces événements et de la préparation de leur suite (DAFx00, Vérone, Italie)

Although the use of the phase-vocoder is not a very recent technique in musical applications and an extensive literature exists on the subject (cf.[1, 2, 3, 4, 5, 6, 7, 8]), hardly any fairly complete reference implementation can be found (cf. for example[9] pp.256-258, where the resynthesis part is performed through an oscillator bank instead of an iFFT). This paper describes in depth an implementation of a phase-vocoder which was entirely coded in MATLAB™ to be added to the COST-G6-DAfx web site as the reference source code implementation of all phase-vocoder based effects. The code is licensed in the terms of the General Public License (GPL) used in open-source projects and can thus be picked up from the COSTG6-DAfx web site and re-used for further research and development.

International audience; Cet article entend livrer quelques réflexions sur l'usage de l'Internet pour l'apprentissagedans un domaine particulier de l'Informatique musicale : les effets audionumériques, etnotamment sur la "révolution philosophique" qu'il engendre.Et révèle que ce nouveau mode d'apprentissage pose la question de l'apprentissage d'uneconnaissance à partir d'informations nombreuses et parcellaires dans des termes trèsdifférents de média plus traditionnels.Il s'appuie sur les travaux en cours dans le cadre d'une action européenne COST G6 "digitalaudio effects", en particulier pour la création de sites dédiés à ce sujet.

International audience; Un hybride sonore est un composite de deux sons (naturels ou synthétiques) qui possède des propriétés de ses géniteurs. Cet article répertorie les moyens classiques de créer ces hybrides: techniques électroacoustiques (mixage, modulation en anneau et en bande latérale unique), séparation sourcerésonance (vocodeur à canaux, prédiction linéaire, cepstre), représentations temps/fréquences (spectrogrammes et phasogrammes) et modèles paramétriques. L'utilisation des hybrides est évoquée, avec le cas particulier du métamorphose sonore. (morphing)

International audience; La synthèse photosonique utilise des disques conçus et réalisés sur ordinateur. Nous présentons ici un nouveau logiciel d'aide à la conception de disques photosoniques : "WaveLoom" ainsi que d'autres outils de recherche et de création. Ce logiciel est basé sur la compilation d'un langage développé par l'Atelier d'Exploration Harmonique.

International audience

This PhD thesis addresses the theory, the implementation and the musical use of adaptive digital audio effects. In the first part, we situate the subject in the context of sound transformations. There exist a great number of signal processing techniques that complete each other and provide a complete set of algorithms for sound transformations. These transformations are applied according to the sound perceptive dimensions, namely dynamics, duration, pitch, spatialisation and timbre. For some effects, the control evolves in an automatic or periodic way, and this control is integrated to the algorithm. The control let to the user is about some parameters of the algorithm. It is given by real controllers, such as knobs, switches, or by virtual controllers, such as the graphical interfaces on computer screens. A main interest in sound synthesis today is the mapping: the topic is to find how we can map the gesture transducer data to the parameters of the synthesis algorithm. Our study is situated at the intersection between digital audio effects, adaptive and gestural control, and sound features. In the second part, we present adaptive digital audio effects, in the way we formalised and developed them. These effects have their controls automated according to sound features. We studied and used a lot of processing algorithms, some in real-time and some out of real-time. We improved them in order to use varying control values. A reflexion was carried out in order to choose a meaningful classification to the musician: the perceptive taxonomy. In parallel, we studied sound features and descriptors, and the ways to control an effect, by the sound and by gestures. We brought together numerous sound features that are used in psycho-acoustics, for analysis-synthesis, for sound segmentation, for sound classification and retrieval, and for automatic transcription of music. We propose a generalised control for adaptive effects, structured with two levels. The first control level is the adaption level: sound features control the effect with mapping functions. We give a set of warping functions (non-linear transfer functions) allowing transformations of the evolution of sound feature curves; we also give feature combination functions and specific warping functions used to warp a control curve according to specific rules. The second control level is the gesture control, which is applied onto the mapping functions between sound features and controls, during combination or during specific warping. This study provides a generalisation of the control of digital audio effects, as well as the conception of toolboxes for composition, and their use in musical context. Numerous experiments and sound examples have been made, among which an adaptive spatialisation controlled by a dancer, and an adaptive stereophonic equaliser. The experiments confirm the interest of such an adaptive and gestural control, for example to change expressiveness of a musical sentence, or to create new sounds., Ce travail de thèse porte sur la théorie, la mise en œuvre et les applications musicales des effets audionumériques adaptatifs. Dans la première partie, nous plaçons le sujet dans le contexte des transformations sonores. Un grand nombre de techniques de traitement du signal sonore numérique se complètent et fournissent un ensemble d'algorithmes permettant de transformer le son. Ces transformations sont appliquées selon les dimensions perceptives du son musical, à savoir la dynamique, la durée, la hauteur, la spatialisation et le timbre. Pour quelques effets, les contrôles évoluent de manière automatique ou périodique, et ce contrôle est intégré à l'algorithme. Le contrôle offert à l'utilisateur porte sur les valeurs de certains paramètres de l'algorithme. Il se réalise à l'aide de contrôleurs réels, tels des potentiomètres, des interrupteurs, ou à l'aide de contrôleurs virtuels, telles les interfaces graphiques sur écran d'ordinateur. En synthèse sonore, l'un des sujets majeurs d'étude à l'heure actuelle est le mapping : il s'agit de savoir comment mettre en correspondance les paramètres d'un contrôleur gestuel et les paramètres d'un algorithme de synthèse. Notre étude se situe à l'intersection entre les effets audionumériques, le contrôle adaptatif et gestuel, et la description de contenu sonore. Dans la seconde partie, nous présentons les effets audionumériques adaptatifs tels que nous les avons formalisés et développés. Ce sont des effets dont le contrôle est automatisé en fonction de descripteurs sonores. Nous avons étudié puis utilisé de nombreux algorithmes de traitement, certains en temps-réel et d'autres hors temps-réel. Nous les avons améliorés afin de permettre l'utilisation de valeurs de contrôle variables. Une réflexion a été menée pour choisir une classification des effets qui ait du sens pour le musicien ; elle a logiquement abouti à la taxonomie perceptive. Parallèlement, nous avons étudié les descripteurs sonores et les moyens de contrôle d'un effet, par le son et par le geste. Nous avons rassemblé de nombreux descripteurs sonores, utilisés en psychoacoustique, en analyse-synthèse, pour la segmentation et la classification d'extraits sonores, et pour la transcription automatique de partition. Nous proposons un contrôle généralisé pour les effets adaptatifs, hiérarchisé en deux niveaux. Le premier niveau de contrôle est le niveau d'adaptation : le contrôle de l'effet est effectué par des descripteurs du son, à l'aide de fonctions de mapping. Nous indiquons des fonctions de conformation (fonctions de transfert non linéaires) permettant de transformer la courbe d'évolution temporelle d'un descripteur, des fonctions de combinaisons des descripteurs ainsi que des fonctions de conformations spécifiques des paramètres de contrôle. Le second niveau de contrôle est celui du contrôle gestuel : le geste agit sur les fonctions de mapping, soit sur la combinaison, soit sur la conformation spécifique des contrôles. De cette étude, il ressort non seulement une généralisation du contrôle des effets audionumériques, mais aussi la réalisation d'outils pour la composition, et leur utilisation en situation musicale. De nombreuses expériences et illustrations sonores ont été réalisées, parmi lesquelles une spatialisation adaptative contrôlée par une danseuse, et un équalisateur stéréophonique adaptatif. Les expériences confirment l'intérêt d'un tel contrôle adaptatif et gestuel, notamment pour modifier l'expressivité d'une phrase musicale, ou pour créer des sons inouïs.