Understanding, modeling and designing multi-touch gestures interaction

Comprendre, modéliser et concevoir l’interaction gestuelle tactile Cette thèse présente nos travaux de recherche sur la variabilité du geste tactile multi-doigts. Nous étudions d’abord la variabilité du geste du point de vue utilisateur, ensuite nous décrivons un ensemble d’outils et de techniques d’interaction.Dans le but de comprendre la variabilité du geste multi-doigts, nous avons mis en place deux études utilisateur. À partir de la première étude, nous proposons une taxonomie des gestes multi-doigts qui présente de façon unifiée les différents aspects qui amènent les utilisateurs à la production d’un geste. De la seconde étude, nous proposons une analyse fine de la variabilité des gestes multi-doigts. Nous distinguons les sources majeures et mineures de variation et présentons huit classes représentatives de la variabilité. Nous analysons notamment le lien entre la forme du geste et comment il est produit. Nous abordons, ensuite, la question de savoir si les différentes sources de variations induisent différents degrés de difficulté ou si elles sont équivalentes pour l’utilisateur. Pour celà, nous décrivons une nouvelle étude sur la perception de la difficulté des gestes multi-doigts.Après avoir compris la variabilité de gestes multi-doigts, nous fournissons un ensemble d’outils: nous proposons d’abord une nouvelle étape de prétraitement des gestes multi-doigts, Match-Up, qui structure les mouvements des doigts. Nous appliquons ensuite Match-Up dans le cadre de la reconnaissance (Match-Up & Conquer), et nous amélio-rons les taux de reconnaissance de 10%. Enfin, nous introduisons le concept du mouvement rigide et nous étudions son potentiel pour rendre l’interaction plus flexible.