Search

(A)verbal qualification of musical mood :new perspectives for synchronization in the audiovisual industryThe music is part of all films produced within the audiovisual and cinematographic industries. It can preexist the film, be destined to be part of the traditional music industry or to be especially synchronized with pictures. In this case, the music excerpt sought after is usually lost in endless media bases providing their own Information Retrieval Systems (IRS). Whereas in the Anglo-Saxon world Music Supervisors (MS) are genuine experts in the use of these systems, it is not the same across Continental Europe. Per accidens MS are asked to translate the desired musical mood into queries for these IRSs, systems that they are sometimes using for the first time. In order to make this task easier for these non-specialists, we explored two approaches. The first led us to explore the possibilities offered by semantic proxemics in order to clean tag clouds mixing taxonomies and folksonomies to trace new relationships between media or to reject qualitatively aberrant qualifications. The second consisted in finding a way to do so without verbalisation. After a review of extant solutions developed for the needs of many other disciplines (experimental psychology, sciences of education, marketing, etc.), we managed to prototype SYM (Spot Your Mood). Instead of relying on verbalisations, SYM makes it possible to provide relatively intuitive spatial coordinates out of a valence-arousal space. Also, SYM has been put to use for many other adaptations in order to qualify user or spectator experience as well as to help elicit the mood with audiences suffering from various verbal or communicational impairments.Keywords : Information, Music, Libraries, Indexing, Metadata, Mood, Emotion, Qualification (a)verbale de l’humeur musicale :nouvelles perspectives pour la synchronisation dans l’audiovisuelLa musique est présente dans tous les métrages produits par les industries audiovisuelles et cinématographiques. Elle peut préexister au film, avoir pour destination l’industrie traditionnelle de la musique ou être spécialement prévue pour être synchronisée à des images. Dans ce cas, la musique recherchée est généralement perdue dans des bases de media musicaux disposant de leurs propres Systèmes de Recherche d’Information (SRI). Alors que dans le monde anglo-saxon la profession de Music Supervisor (MS) permet d’allouer à cette tâche un vrai spécialiste de l’utilisation de ces systèmes, il n’en est pas de même dans les productions d’Europe continentale. Des MS per accidens s’y trouvent devoir traduire l’humeur musicale désirée en requêtes pour ces SRI qu’ils interrogent parfois pour la première fois. Dans l’optique de rendre cette tâche moins ardue pour des non-spécialistes de la question musicale, nous avons exploré deux voies. L’une envisage la proxémie sémantique pour le nettoyage des nuages de tags mêlant taxinomies et folksonomies, afin de tracer de nouvelles reliances entre media ou écarter des qualifications qualitativement aberrantes. La seconde voie explorée consiste à trouver une manière d’éviter la verbalisation. Après un état de l’art des solutions existantes pour la qualification de l’humeur ou, plus largement, des états émotionnels, solutions développées pour les besoins de nombreuses autres disciplines (psychologie expérimentale, sciences de l’éducation, marketing, etc.), l’analyse conduit au prototypage du dispositif SYM (Spot Your Mood). Par pointage sur un espace de Valence-Arousal, SYM permet de substituer des coordonnées spatiales abstraites relativement intuitives aux qualifiants verbaux. Au-delà du champ musical, SYM a aussi fait l’objet d’autres validations dans la qualification de l’expérience d’utilisateurs ou de spectateurs, ainsi que pour l’aide à l’explicitation de l’humeur chez des publics souffrant de divers handicaps empêchant la verbalisation ou la communication.Mots-clefs : Information, Musique, Bibliothèques, Indexation, Métadonnées, Humeur, Emotion

International audience; The emotional dimension of someone's experience and its visualization is a increasingly recurring theme in scientific studies. If emotions are often studied using sensors measuring the activity of the body or the brain of an individual, few tools exist in a strictly qualitative usage (Geneva Emotion Wheel (Sacharin, Schlegel, Scherer 2012), Self-Assessment Manikin (Bradley, Lang 1994), Spot Your Mood (Yvart, Delestage, Leleu-Merviel 2016)). In terms of emotion visualization of participants, the usage of these setups requires them to have a clear and synchronized visualization with the experimental content to be pertinent. Based on 17 clinic cases using Spot Your Mood (SYM), a nonverbal tool for the declaration of emotional states based on the Valence-Arousal space (Russell 1979, Scherer 2005), this article explore the possibilities of the SYM tool regarding the visualization of the data it produces. The emotional data collected are notably confronted with semi-structured interviewes, as well as a second viewing of the videos in the original settings, directly commented by the participant. The resulting analysis of the emotions declared with SYM and the various verbalization methods allowed the emergence of satisfactory correlations to assess the liability of the participants’ spots (name given to the self-assessment in SYM). That way, the identification of zones on the Valence-Arousal space describing the quality of the relation between the content and the individual could be done, as well as the implied emotional pathways, allowed to represent the individual’s emotional dynamics. It opens the door to a better representation of the emotional experience in a qualitative setting for one or multiple persons in a statistical approach. This article will begin by presenting the different tools used to gather emotional data with a declarative approach. Afterwards, in the context of (Mugur-Schächter 2006) and (Varela, Thompson, Rosch 1993), alongside the experimental results observed in (Delestage 2018a), the communication will describe the possibilities of SYM in the determination of the emotional dynamics of an individual, and particularly, the validation of its results by describing the triangulation tools employed.

National audience; Depuis 10 ans le département Développement, Recherche, Enseignement en Audiovisuel et Multimédia (DREAM) de l’université Polytechnique des Hauts-de-France (Valenciennes – France) participe chaque année au programme IABM Student Awards (International trade Association for Broadcast & Media technology) qui permet à 2 lauréats d’être invités au plus grand salon européen en audiovisuel l’IBC (International Broadcasting Convention) à Amsterdam, avec la possibilité d’assister aux conférences techniques de leur choix. Pour y parvenir, le département DREAM a progressivement mis au point et intégré à sa pédagogie une méthode de sélection reposant notamment sur la recherche documentaire en veille technologique, les bases de l’écriture d’articles scientifiques selon un format imposé, la maîtrise de la langue anglaise, l’écriture originale sans plagiat et la méthode de présentation orale Pecha Kucha. Cet article détaille les modalités de mise en œuvre et objectifs pédagogiques de ce dispositif pluridisciplinaire. Le recul des années de participation permet également de le compléter d’un retour d’expérience et une analyse des points forts du dispositif et des points restant à améliorer.

Depuis 10 ans le département Développement, Recherche, Enseignement en Audiovisuel et Multimédia (DREAM) de l’université Polytechnique des Hauts-de-France (Valenciennes – France) participe chaque année au programme IABM Student Awards (International trade Association for Broadcast & Media technology) qui permet à 2 lauréats d’être invités au plus grand salon européen en audiovisuel l’IBC (International Broadcasting Convention) à Amsterdam, avec la possibilité d’assister aux conférences techniques de leur choix. Pour y parvenir, le département DREAM a progressivement mis au point et intégré à sa pédagogie une méthode de sélection reposant notamment sur la recherche documentaire en veille technologique, les bases de l’écriture d’articles scientifiques selon un format imposé, la maîtrise de la langue anglaise, l’écriture originale sans plagiat et la méthode de présentation orale Pecha Kucha. Cet article détaille les modalités de mise en œuvre et objectifs pédagogiques de ce dispositif pluridisciplinaire. Le recul des années de participation permet également de le compléter d’un retour d’expérience et une analyse des points forts du dispositif et des points restant à améliorer.

International audience