[Google]Le thème général de ce travail est celui de l'interaction gestuelle, i.e. de l'utilisation du geste pour l'interaction homme-machine. Le geste sera vu dans ce contexte comme une fonction du temps dans un ensemble de dimensions en rapport avec l'utilisateur et dépendantes de l'application considérée. Les dimensions envisagées incluent la position, la taille et l'orientation de parties du corps, d'objets tenus ou portés ou de surfaces de contact. Elles ne se limitent pas à des informations géométriques, incluant potentiellement d'autres éléments comme la pression exercée sur des capteurs. L'interaction gestuelle nécessite la capture de ces informations, leur description sous une forme structurée et leur interprétation en temps réel. Le travail proposé se concentrera sur l'interprétation.
Différentes méthodes de reconnaissance ont été proposées pour l'interaction gestuelle comme les modèles de Markov cachés [1], la déformation temporelle dynamique [2], la classification statistique à partir de caractéristiques géométriques [3], la comparaison de trajectoires [4] ou des méthodes heuristiques spécifiquement adaptées à un ensemble de gestes particulier [5].
La multiplication des surfaces interactives multi-touch (e.g. trackpads et souris, téléphones, tables) et des dispositifs grand-public à base de capteurs (e.g. wiimote) élargit considérablement le champ d'application de l'interaction gestuelle. L'objectif est d'étudier les méthodes de reconnaissance existantes pour identifier leurs points forts et limites au vu des différents défis posés par ces nouvelles applications. On s'intéressera notamment aux possibilités de segmentation des commandes gestuelles dans un flot continu d'interactions, à la reconnaissance de commandes paramétrées, à des gestes multi-utilisateurs [6] et multi-dispositifs [7].
Une bonne culture mathématique sera nécessaire pour comprendre les principes, points forts et limites théoriques des différentes approches. Un minimum de connaissances en programmation (C, C++ et/ou Python) est également souhaité afin de pouvoir comparer leurs avantages et inconvénients pratiques et réaliser un ou plusieurs démonstrateurs.
La personne en charge de ce travail aura accès aux équipements de la Plateforme Interactions - Réalité Virtuelle - Images (PIRVI) incluant notamment différents modèles de tables interactives et un système de suivi ARTtrack.
[Google] [Google] [Google]