Utilisation d'une télécommande Wii pour le suivi des doigts et la reconnaissance des gestes

Il y a eu de nombreuses innovations récentes dans le domaine de l'IHM au cours de la dernière décennie, avec des appareils tactiles ainsi que d'autres formes d'interaction introduites pour la première fois par la Nintendo Wii. Ce livre examine une autre forme de HCI comme alternative - utiliser vos doigts pour manipuler directement des objets à l'écran. La télécommande Wii est l'appareil clé qui, lorsqu'il est utilisé avec une source de lumière infrarouge, permet le suivi des doigts et permet cette forme d'interaction. Le projet examine les configurations et les méthodes expérimentales et décrit les méthodes possibles pour la reconnaissance des gestes à l'aide de cette approche de suivi. Dans ce livre, je décris comment un système HCI peut être implémenté à l'aide de la télécommande Wii qui permet la manipulation d'objets à l'écran par de simples gestes dynamiques et comment il peut être étendu pour la reconnaissance symbolique de gestes en utilisant une modélisation de plus haut niveau. Le moteur de reconnaissance gestuelle proposé et implémenté utilise la modélisation de la dynamique pour les gestes de manipulation et est basé sur un cadre de machine à états finis pour les gestes symboliques.