Conception des modèles d'observation audio temps réel à l ... - atiam

22 Sélection de descripteurs et calcul des descripteursFIG. 3.2 – Les différents ensembles de descripteurs, basés sur leur mode decalculAudio Fundamental Frequency, Harmonic Spectral Tristimulus. Le coût decalcul associé à cet ensemble est c fft + c harmonique .4. L’ensemble E perceptif regroupant les descripteurs perceptifs. Ils sont calculésà partir d’un modèle perceptuel, qui est lui-même calculé à partirde la Transformée de Fourier à Court Terme. Ex : coefficients MFCC,Audio Filterbank Centroid, AudioLoudness. Le coût de calcul associé à cetensemble est c fft + c perceptif .5. L’ensemble E harmonico−perceptif regroupant les descripteurs harmonico-perceptifs.Quelques descripteurs (Audio Filterbank Deviation, Audio Filterbank Odd/EvenRatio, Audio Filterbank Tristimulus) sont calculés à la fois à partir d’unmodèle sinusoïdal harmonique et à partir d’un modèle perceptif. Lecoût de calcul associé à cet ensemble est c fft + c harmonique + c perceptif .3.3 Recherche et évaluateurs de sous-ensemblesÀ l’exception de certains algorithmes de recherche permettant d’ordonnerles descripteurs (principalement, la recherche pas à pas), les algorithmes combinaisonsalgorithmiques se basant sur un algorithme de parcours de l’espacede recherche et un algorithme d’évaluation de sous-ensembles de descripteursne sont pas adaptés au problème posé. En effet, ils n’apportent aucunegarantie sur le nombre de descripteurs qui sera retenu dans le résultat. Si l’on faittravailler ces algorithmes sur la totalité des n dimensions dont on disposeen entrée, il est impossible de prévoir le coût de calcul du sous-ensemble dedescripteurs sélectionné.Toutefois une modification de l’évaluateur de sous-ensemble de descripteurswrapper permettant d’intégrer le coût de calcul des descripteurs au calculdu "mérite" des sous-ensembles est possible. Nous l’avons d’ailleurs implémentée(combinée avec une recherche génétique) et nous avons constatéles problèmes qu’elle pose. Il faut choisir la fonction de coût qui combine lesdeux critères (le premier est l’erreur de classification, le second est le coûtde calcul). Diverses fonctions candidates ont été testées, mais nous avonsconclu que les approches qui suivent méritaient plus d’être étudiées car elles