rapport d'activité 2009 - WWW Ircam

5 Développer la recherche et les logiciels applicatifsGF (SUIVI DE GESTE)Équipe : Interactions musicales temps réelDescriptifL’objet gf (pour gesture follower) permet de reconnaître etde suivre l’évolution temporelle de morphologies gestuelleset/ou sonores. L’objet compare en temps réel un flux dedonnées avec un ensemble de « phrases » préenregistrées.Deux types d’informations en sortie sont continuellementmis à jour :• « likelihood » = « similarité » entre le flux de données entrantet les phrases enregistrées ;• « Time » index = indique la progression temporelle d’unephrase reconnue.L’objet gf fonctionne avec tout type de données multidimensionnelles,régulièrement échantillonnées dans le tempscomme des données de capteur, des descripteurs sonores,des descripteurs d’images, etc. La méthode repose sur lamodélisation des courbes temporelles multidimensionnellesau moyen de modèles de Markov.■ Principales fonctions réaliséesUn module complet a été réalisé et testé, basé sur la libraireMuBu et permettant d’utiliser l’objet d’édition et devisualisation de données iMuBu.Parmi les fonctionnalités notons :• enregistrement de phrases en temps réel et nommagedes phrases ;• fonctions d’import et export ;• fonctions de « transport » follow, play, stop, pause,resume, restrat, jump ;• structuration de l’enchaînement des phrases ;• gestion de markers ;• gestion de presets ;• fonction « experts » donnant accès à certains élémentsde la modélisation markovienne.IRCAM – RAPPORT D’ACTIVITÉ 2009126