Abstract de la publi numéro 11431

Cet article présente une méthode originale de recherche d’une occurence d’un signe dans une vidéo en Langue des Signes (LS). Bien que la LS soit une langue “parlée”, la difficuté d’appliquer les méthodes traditionnelles du traitement automatique de la parole à ce domaine implique la mise au point de nouvelles approches. La méthode que nous présentons est basée sur une modélisation paramétrique du mouvement des signes. La requête est formulée en signant un exemple du signe à retrouver dans la vidéo. Le système utilise une caractérisation des signes basée sur le mouvement projeté des mains et de la tête. Les signes isolés sont regroupés en catégories en extrayant plusieurs paramètres de la position, des trajectoires et de la dynamique des mains et de la tête. Nous présentons les différents filtres permettant d’extraire les valeurs de ces paramètres et de calculer un score de similarité entre deux signes. Nous présentons enfin l’architecture du système de requête basé sur ces outils et évaluons le gain qu’il apporte à l’utilisateur pour l’assister dans sa recherche. Le problème traité peut être perçu plus largement comme la recherche d’une trajectoire en trois dimensions et pourrait trouver d’autres applications dans l’indexation automatique de vidéos ou la communication homme machine.