Tableau magique:une interface gestuelle en réalité augmentée et vision par ordinateur

Abstract

L ’interprétation automatique de gestes basée sur la vision par ordinateur offre de nouvelles possibilités d’interaction avec l’ordinateur, plus naturelles et intuitives qu’avec les périphériques classiques. Cependant, le canal gestuel est un moyen de communication particulièrement riche et la main un objet articulé complexe. Ainsi, l’interaction personne-machine gestuelle constitue un axe de recherche particulièrement actif avec un potentiel applicatif important. Le travail proposé fait partie d'un projet qui vise la commande d'une interface homme-machine basée sur le suivi de doigt pour la sélection d’une écriture sur un tableau blanc et puis la rendre sous forme virtuelle d’une part et d’autre part la reconnaissance de geste de la main pour nous permettre de manipuler cet objet virtuel. Ce but implique la restriction de la réponse en temps réel et l'utilisation des environnements sans contrainte. En ce mémoire nous présentons un nouvel algorithme à la vision et identifions des gestes de la main pour interagir avec le système. Avec le développement rapide de l’informatique dans les domaines de la technologie virtuelle et la vision par ordinateur (télé-enseignement, université virtuelle, téléconférences, etc.), il est devenu important d’inventer de nouvelles techniques d’interaction avec la machine telle que la Réalité Augmentée (RA). Cette dernière propose contrairement à la Réalité virtuelle la conservation des objets qui nous sont familiers, mais qui sont augmentés avec les capacités de traitement de l’information. Les systèmes de RA sont peu nombreux, mal cernés et fonctionnent dans des conditions expérimentales très contraintes. Dans ce mémoire, nous proposons un système de RA qui est un tableau magique représenté par une interface personne-machine augmentée destinée à reconnaître les gestes de la main nue et aussi de suivre le doigt pour la sélection et les manipulations des objets virtuelles et tout ça on utilisant les approches de la vision par ordinateur. Pour diminuer le golf entre l’utilisateur et l’ordinateur, nous allons améliorer la manipulation d’un tableau conventionnel à l’aide de plusieurs dispositifs électroniques, une caméra pour acquérir des commandes gestuelles et un vidéoprojecteur pour refléter la réaction du système sur ce tableau.