Untitled - WWW Ircam

4 RECHERCHE ET DÉVELOPPEMENT, L’UMR STMS
GF (SUIVI CONTINU)
■ Descriptif
L’objet gf (pour gesture follower) permet de reconnaître et de
suivre l’évolution temporelle de morphologies gestuelles et/
ou sonores. L’objet compare en temps réel un flux de données
avec un ensemble de « phrases » préenregistrées. Deux
types d’informations en sortie sont continuellement mis à
jour :
• « likelihood » = « similarité » entre le flux de données
entrant et les phrases enregistrées ;
• « Time index » = index indiquant la progression temporelle
d’une phrase.
L’objet gf fonctionne avec tout type de données multidimensionnelles,
régulièrement échantillonnées dans le temps
comme des données de capteurs, des descripteurs sonores,
des descripteurs d’images, etc. La méthode repose sur une
modélisation des courbes temporelles multidimensionnelles
basée sur des modèles de Markov.
■ Principales fonctions réalisées
Un module complet est réalisé en se basant sur la libraire
MuBu, ce qui permet, entre autre, d’utiliser l’objet d’édition
et de visualisation de données iMuBu.
Parmi les nouvelles fonctionnalités, notons :
• sauvegarde et chargement des données et configuration
en format MuBu et text ;
• track « Settings » pour l’affichage et l’édition de la configuration
du gf ;
• fonctionnalité de batch processing, qui permet l’utilisation
du gf en mode offline sur des données pré chargées ;
• track « Probability » pour la visualisation de la fonction
de probabilité qui est utilisée pour l’estimation de l’index
temporel.
IRCAM – RAPPORT D’ACTIVITÉ 2011
124