Capture synchrone de la production sonore et de la gestuelle du pianiste. Vers une interprétation

Résumé

Une expérience de mise en évidence du rapport entre gestuelle du pianiste et production sonore induite a été réalisée dans un auditorium dédié à la musique orchestrale. Quatre pianistes de parcours et de styles différents ont exécuté quatre pièces extraites des Kinderszenen, op. 15 (Scènes d’enfants) de Schumann, qui présentent à la fois une homogénéité musicale, mais aussi une grande variabilité d’atmosphères sonores. Les mesures acoustiques mises en place visaient à capter le signal sonore à l’intérieur et à l’extérieur du piano dans l’objectif d’extraire des descripteurs acoustiques par traitement du signal et à réaliser des tests d’écoute du type de ceux effectués en psychoacoustique. Simultanément et de manière synchronisée, la gestuelle des pianistes a été enregistrée par un système de capture de mouvement (mocap) composé de caméras haute fréquence ultrasensibles. Les pianistes étaient instrumentés par des marqueurs réfléchissants placés sur une combinaison ou directement à même la peau dans le cas des mains et des doigts. Les premiers résultats des tests psychoacoustiques montrent que l’occurrence des timbres attribués aux extraits sonores est conforme à l’occurrence publiée dans la littérature.

Mots-clés :

• capture du mouvement,
• perception sonore,
• piano,
• timbre,
• traitement du signal acoustique

Abstract

An experiment aiming to highlight the relationship between the pianist’s gesture and sound production was performed in an auditorium dedicated to orchestral music. Four pianists from different backgrounds and styles performed four pieces of Kinderszenen, op. 15 (Scenes from Childhood) by Schumann, which show both musical homogeneity but also a great variability of sound atmosphere. The capture of the sound signal inside and outside the piano was performed in order to extract identifiers by signal processing and to perform listening tests of those carried out in the field of psychoacoustics. Simultaneously, the pianist’s gestures were recorded by a motion-capture system composed of ultrasensitive high frequency cameras. The pianists were instrumented with reflective markers placed on a no reflective suit or directly on the skin in the case of hands and fingers. The first of psychoacoustic’s test results show that the occurrence of timbre attributes is coherent of those found in the literature.

Keywords:

• acoustic signal processing,
• motion-capture,
• piano,
• sound perception,
• timbre