A framework for engineering gesture-based user interfaces using the Leap Motion controller

La reconnaissance gestuelle à la portée de la main : un nouvel outil à la disposition des développeurs

Le domaine de la reconnaissance gestuelle est actuellement en plein essor. Mais, malgré son intérêt potentiel dans une grande variété de secteurs (lecture d’images médicales, opérations chirurgicales, manipulation « safe » de matériel collectif en cas de crise sanitaire, aide aux personnes en situation de handicap…), les applications capables de reconnaître les gestes humains restent rares et de piètre qualité ou cantonnées au domaine des jeux vidéos. Arthur Sluÿters a comblé cette lacune en élaborant un outil (en collaboration avec Bastien Nothomb qui réalisait son mémoire en parallèle dans le domaine médical) permettant aux développeur·euse·s de mettre au point des applications plus adaptées aux capteurs gestuels. Après une démarche de standardisation des gestes les plus intuitifs simulés par des utilisateur·rice·s lambdas, un prototype a été configuré et testé dans deux domaines (médical – par Bastien Nothomb, et multimédia – par Arthur Sluÿters). Son objectif : démocratiser les applications contrôlées par le geste et les faire sortir de leur niche technologique et commerciale.