Rapport d'activité - WWW Ircam

RAPPORT DÉTAILLÉRECHERCHE ET DÉVELOPPEMENTANALYSE ET SYNTHESE DES SONSvisualisation de hauteur de signaux polyphoniques et fournit une représentation de typepiano–roll à partir du signal audio.Participant : G. Peeters.1.4.3.6. Reconnaissance automatique des instruments et indexationCette thèse étudie la reconnaissance des instruments, notes isolées, enregistrements continusde solos et enregistrements polyphoniques [Livshin05a]. Une première version d'un système deconversion de Wav à Midi a été développée intégrant l'évaluation de f0 multiples de C. Yeh(cf. paragraphe 1.4.1.5 "Estimation de fréquences fondamentales multiples") avecl'identification des instruments. Un article sur ce système a été soumis au journal d'EURASIP[Livshin06b].La possibilité d'employer seulement la structure harmonique du son (logiciel Additive) pourl'identification des instruments a été évaluée et un article sur ce sujet a été accepté à laconvention 2006 de l'AES [Livshin06a]. Les premiers résultats montrent que le taux de bonnereconnaissance diminue au plus d’environ 4 % (environ de 94 % à 90 %) quand le système dereconnaissance utilise seulement la structure harmonique du son. Ce sujet sera égalementdéveloppé dans un autre article pour ISMIR 2006.Notre algorithme d'identification des instruments dans des duos a été modifié et généralisépour accepter un nombre arbitraire d'instruments jouant en même temps. Cet algorithme a étéévalué sur des mélanges de solos jusqu'à 5 instruments jouant concurremment. Les testspréliminaires donnent des taux de reconnaissance des instruments présents dans chaquesegment de 1s. (indépendamment du reste de l’enregistrement) de l’ordre de 71 %, 59 %, 49 %et 42 % pour 2, 3, 4 et 5 instruments respectivement.Diverses méthodes de reconnaissance des formes ont été évaluées pour l'identification desinstruments, y compris des algorithmes de classification et des méthodes de réduction dedimension.Cette recherche est une part du projet MusicDiscover de l’ACI Masse de Données (cf.paragraphe "Projet MusicDiscover") où une partie des travaux est menée en collaboration avecle LIRIS et l’ENST. Une base de données de solos pour le projet MusicDiscover a été créée encollaboration avec S. Essid (ENST).Participant : A. Livshin (thèse).Collaborations internes : G. Peeters, C. Yeh (thèse).Collaboration extérieure : S. Essid (ENST).1.4.3.7. Aide à l’orchestrationCe projet a pour but de construire des outils informatiques pour aider les compositeurs àorchestrer leurs œuvres. Le système mis en place en 2005 permet à l’utilisateur de spécifier unson cible et un ensemble d’instruments disponibles, puis de déterminer quel accord oucombinaison de sons de ces instruments permettra d’imiter au mieux la cible. Ce système sefonde sur une connaissance des différents instruments de l’orchestre, acquise par l’analyse debases de données contenant une grande variété de modes de jeu et de hauteurs. Ces analysesextraient du signal un ensemble de descripteurs permettant, d’une part, de juger de lasimilarité perceptive entre deux sons et, d’autre part, présentant certaines propriétésd’additivité. La recherche des meilleures combinaisons se fait pour le moment de manièrequasi exhaustive, mais d’autres méthodes permettant de restreindre l’espace de recherchesont en cours de développement. Enfin, durant l’année 2005, nous avons limité la description duIRCAM 79RAPPORT D'ACTIVITÉ 2005