3.2 Manipulation d’objets et gestes
"L’interaction est l’un des piliers fondamentaux de la réalité virtuelle. Il s’agit de la capacité des utilisateurs à interagir avec l’environnement créé par la technologie de réalité virtuelle. Il s’agit entre autres des gestes physiques, des mouvements de la tête et du corps, des commandes vocales, contrôleurs manuels, interfaces tactiles et sensations haptiques." (1)
Pour répondre à ces besoins, des outils spécifiques ont été développés et la recherche continue d’enrichir ces interactions.
Des solutions comme Mesh Slicer ou VR Cutting permettent de découper des objets 3D avec précision, utiles pour le prototypage ou la formation technique. D’autres outils, tels que VR Brush, offrent des fonctions de dessin ou de sculpture en 3D, libérant la créativité dans un espace immersif.
Unity Mesh Slicer, (Source: YouTube)
Des plateformes comme Gravity Sketch ou Shape XR vont plus loin en intégrant la co-création et la collaboration en temps réel. Ces interfaces permettent aux utilisateurs de modéliser, designer ou réviser des projets en VR, dans un environnement spatial naturel, au-delà des limites des logiciels 2D traditionnels.
Shape XR, (Source: YouTube)
La recherche académique s'intéresse à l'amélioration de la fidélité des gestes et des retours sensoriels. Un exemple notable est le gant "reconfigurable" présenté par Hangxin Liu et al en 2023, capable de capturer avec précision différents types de préhension physique ou virtuelle.
Pour que ces interactions soient efficaces et naturelles, il est essentiel de repenser les gestes associés à chaque tâche technique. Dans le cadre de notre propre projet chez iXiVERSE, nous avons développé nous mêmes des gestes spécifiques pour des actions courantes en VR, tels que la découpe, la mesure et la peinture.
Reproduire ces gestes nous a permis de mieux comprendre leur construction. Par ailleurs, le fait de rendre ce travail open source permet à la communauté d’en bénéficier. Notre projet de boîte à gestes vise à fournir une base de gestes techniques adaptés à la VR, en s’inspirant des gestes du monde réel tout en tenant compte des spécificités de l’interaction virtuelle.
Video de découpe d'un carré, (Source: Développement interne iXiVERSE)
Video de dessin, (Source: Développement interne iXiVERSE)
Video de peinture sur des surfaces, (Source: Développement interne iXiVERSE)