Titre : Interaction avec une Maquette Phygitale : Gestion des Occultations Physiques et Numériques

Directeurs : Emmanuel Dubois, Marcos Serrano

Rapporteurs : Thomas Pietrzak, Thierry Duval

Jury : Jean-Pierre Jessel, Laurence Nigay

Publications (par ordre chronologique):

• 🎖️Meilleure Démo Démo IHM’25 : Reda Benkhelifa , Clément Truillet , Gary Perelman , Emmanuel Dubois , Marcos Serrano. 2025, Maquette urbaine augmentée : Techniques d’interactions pour des visualisations situées autour de multiples référents physiques. https://hal.science/hal-05294849
• IHM’25 : Clément Truillet, Emmanuel Dubois, and Marcos Serrano. 2025, Techniques de Réduction de l’Occultation pour la Sélection de Référents Physiques en Réalité Augmentée : Adaptation et Evaluation de Techniques de Réalité Virtuelle. https://hal.science/hal-05294849
• INTERACT’25 : Clément Truillet, Emmanuel Dubois, and Marcos Serrano. 2025, Pointing at Physical Targets Around the Field of View of Optical See-Through Head-Mounted Displays. https://doi.org/10.1007/978-3-032-04999-5_33
• IHM’24 : Clément Truillet, Marcos Serrano, and Emmanuel Dubois. 2024. Interaction avec des Référents Physiques Dans et Autour du Champ D’Affichage des Casques Semi-Transparents de Réalité Augmentée. In Proceedings of the 35th Conference on l’Interaction Humain-Machine (IHM ’24), May 03, 2024. Association for Computing Machinery, New York, NY, USA, 1–15. https://doi.org/10.1145/3649792.3649796
• Rencontre Doctorales IHM’24 : Clément Truillet. 2024. Interaction avec une Maquette Phygitale : Techniques de Sélection Multi Cible. In IHM 2024 – 35ème Conférence Internationale Francophone sur l’Interaction Humain-Machine, March 2024. Association Francophone d’Interaction Humain-Machine (AFIHM), Paris, France, 1-6. https://hal.science/hal-04490613

Vidéo

• Pointing at Physical Targets Around the Field of View of Optical See-Through Head-Mounted Displays

Résumé

La visualisation située consiste à présenter des données numériques à proximité d’un objet physique générateur ou concerné par cette donnée : on appelle cet objet le référent physique. La visualisation située permet alors aux utilisateurs d’afficher des données dans le contexte des référents et d’extraire des informations supplémentaires ne faisant pas partie du jeu de données originel. Ainsi, l’utilisateur est amené à interagir avec des référents physiques et des données numériques réparties tout autour de lui en fonction de l’espace et du scénario d’interaction.
Dans ce contexte, les utilisateurs effectuent des tâches similaires : explorer, comparer, filtrer des données et annoter des référents. Ces tâches nécessitent une interaction directe avec les données et les référents, permise par des casques de réalité augmentée semi-transparents. Ces dispositifs permettent une interaction naturelle avec le monde augmenté, sans encombrer les mains des utilisateurs, tout en offrant des espaces d’affichage étendus et des perspectives multiples.
Dans cette thèse, nous explorons deux verrous : le pointage de référents physiques situés autour du champ d’affichage du casque ainsi que la réduction de l’occultation des référents physiques en réalité augmentée.
Dans le cadre de nos travaux portant sur le premier verrou, nous avons conçu et évalué deux techniques, Arm et Head-To-Finger, intégrant une vue focalisée affichant la zone autour du point d’impact du rayon de pointage. Ces techniques ont démontré de meilleures performances dans certains contextes que le pointage direct, imposant aux utilisateurs des mouvements de tête et de se détourner de l’affichage des données.
Dans le cadre de nos travaux portant sur le second verrou, nous avons appliqué et évalué trois types de techniques de réduction de l’occultation en RV au contexte de la RA. Basé sur l’analyse de ces résultats, nous avons alors développé et évalué deux nouvelles techniques : ConeProbeAR, ainsi qu’ARPortal, une technique proposant à l’utilisateur une vue de dessus de l’environnement du point d’impact de son rayon. Les résultats d’une seconde étude ont montré qu’ARPortal surpassait les autres techniques en termes de temps de réalisation, de taux d’erreur et de préférence des utilisateurs.
En conclusion de cette thèse, nous développons des perspectives court, moyen et long termes, inscrivant nos travaux dans de recherches futures autour de la gestions d’autres formes d’occultation ainsi que sur l’interaction en environnements collaboratifs multi-utilisateurs.