Untitled - WWW Ircam

4 RECHERCHE ET DÉVELOPPEMENT, L’UMR STMS
Projet eJam avec Orange Labs
Orange Labs développe avec le projet eJam un système de
musique participative de chant en réseau. Une première
étape de collaboration entre Orange Labs et l’Ircam a été
initiée en fin 2011 en prévoyant, à plus long terme, des développements
de composants technologiques à partir de 2012.
Dans cette première collaboration, l’équipe contribue au
développement de deux composants « plugins » de traitement
sonore : une réverbération et un composant qui corrige
automatiquement la hauteur d’un enregistrement de chant,
sur la base d’un alignement à un enregistrement référence.
Le développement du plugin de réverbération utilise la
bibliothèque Ircam Reverb développée par l’équipe Espaces
acoustiques et cognitifs. La correction de la hauteur s’appuie
sur une nouvelle bibliothèque d’alignement entre deux
fichiers audio ainsi que les bibliothèques MuBu, ZsaZsa et
RTA. Plusieurs prototypes Max/MSP ont été développés pour
ce projet.
Projet Topophonie - Visualisation d’un corpus de sons dans Shapes
(Matthieu Savary, UserStudio)
Projet Topophonie
Programme : ANR ContInt ; période : nov 09 – nov 12 ; coordinateur
: ENSCI
Le projet de recherche Topophonie porte sur la navigation
sonore dans les flux et les masses d’événements avec un
rendu audio graphique. Le terme audio graphique désigne
des formes graphiques et sonores dans lesquelles les modalités
visuelle et sonore sont synchronisées. Le but du projet
est de concevoir et développer des modèles, des interfaces et
des rendus audio graphiques navigables d’ensembles d’objets
corpusculaires, animés et spatialisés.
Nous avons approfondi l’application de la synthèse par
corpus au problème de génération de textures sonores avec
un contrôle de très haut niveau par un mapping de paramètres
phénoménologiques vers des descripteurs sonores.
Le travail de recherche bibliographique préalable a d’ailleurs
permis de publier un article et de faire une présentation
étendue « State of the Art » (dont seulement trois ont été
acceptés) à la conférence DAFx [Schwarz11c].
Le projet est entré en 2011 dans la phase de la mise en œuvre
des applications d’usage. Les travaux réalisés fournissent
des interfaces de définition et de contrôle de scènes multimédias
et des outils de rendu temps réel sur les canaux
audio et visuels synchronisés. Les premières réalisations
ont été l’installation de réalité augmentée audio Topophonie
Mobile au festival Futur en Seine, permettant une balade géolocalisée
dans un parc public augmentée par une ambiance
acoustique autour du thème de l’eau, et l’application Navidium
de cartographie numérique interactive audio graphique.
Pour Topophonie Mobile, nous avons spécifié et développé un
premier prototype du moteur audio IMTR-Audio-Engine (IAE)
en librairie C, qui a été ensuite intégré par Orbe dans iOS.
L’intégration de ce moteur dans l’environnement graphique
Unity3D a été démarrée en vue de son utilisation pour des
réalisations par les étudiants de l’ENSCI début 2012.
Zones d’activation pour Topophonie Mobile (Orbe)
D’autres points forts de la recherche sont l’échange et la
diffusion des savoirs en deux workshops internationaux sur
la modélisation audio graphique, organisés par le projet en
2011.
Nous avons préparé la réalisation d’un prototype du concept
des « interfaces sales » par Matthieu Savary du partenaire
User Studio en travaillant sur l’analyse vidéo et la détection
de mouvement afin de le convertir en profil d’activation. Le
problème de régions non occupées dans la projection 2D de
l’espace de descripteurs a été résolu par un algorithme de
distribution par triangulation et modèle masse – ressorts,
implémenté en FTM [Lallemand11a].
IRCAM – RAPPORT D’ACTIVITÉ 2011
104