Aller au contenu
3DCRÉATION

Établi virtuel avec bacs, pied à coulisse et main en hand tracking, application XR Polyvia

Application XR de formation pour Polyvia

3DCREATION a développé pour Polyvia une application en réalité mixte de formation permettant d’apprendre à réparer une pièce grâce au hand tracking.

Client
Polyvia
Besoin
Formation métier
Technologie
Réalité mixte
Année
2025
Secteur
Plasturgie et composites
Prestation
Conception pédagogique, modélisation 3D, développement

3DCREATION a développé pour Polyvia une application en réalité mixte de formation permettant d’apprendre à réparer une pièce grâce au hand tracking.

Contexte

Polyvia, l’organisation professionnelle de la plasturgie et des composites, nous a confié la conception et le développement d’une application de réalité mixte pour la formation technique. Elle permet d’apprendre à réparer une pièce par les gestes, sans poste physique ni formateur présent en permanence, et sans risque d’erreur coûteuse sur du matériel réel.

Objectifs

Les objectifs

  • Reproduire les vrais gestes

    Démonter, mesurer, remplacer, vérifier : les actions d’un technicien, faites avec les mains.

  • Guider pas à pas

    Un panneau d’instructions et une voix off, pour progresser en autonomie.

  • Faire monter en compétence

    Deux scénarios et plusieurs types de pannes, pour adapter la difficulté au niveau.

La réalité mixte et le hand tracking, pour garder le geste

L’apprenant est placé devant un établi virtuel où l’attend la pièce à réparer. À sa droite, un panneau d’instructions interactif affiche les étapes, et une voix off le guide. Il prend une clé Allen pour démonter la pièce défectueuse, vérifie l’étanchéité et les dimensions au micromètre, remplace la pièce, puis fait les vérifications finales. Chaque action réussie est confirmée par un repère visuel et un retour sonore.

Le hand tracking du Meta Quest 3 supprime les manettes : l’apprenant manipule les outils comme dans la réalité, et la prise en main est immédiate, même pour un public peu familier de ces casques. Les erreurs sont simulées et guidées.

Deux scénarios confrontent l’apprenant à des pannes et à des procédures différentes. L’outil peut servir en formation initiale, en perfectionnement, en démonstration ou en sensibilisation.

Découvrir la solution Réalité mixte

Établi virtuel avec bacs, pied à coulisse et main en hand tracking, application XR Polyvia

Méthode

Le déroulé

  1. Conception pédagogique

    Les étapes de la formation scénarisées avec Polyvia.

  2. Modélisation 3D

    L’établi, les pièces et les outils modélisés de façon réaliste.

  3. Développement en réalité mixte

    Le hand tracking intégré, et les interactions techniques : manipuler un outil, ajuster une pièce, mesurer.

  4. Interfaces et voix off

    Le panneau d’instructions et la voix off qui guident l’apprenant.

  5. Optimisation

    Une expérience fluide sur le casque.

Présentation détaillée

Chez 3DCREATION.FR, nous concevons des solutions immersives destinées à transformer la manière dont les entreprises forment et accompagnent leurs équipes. Dans cette optique, Polyvia, l’organisation professionnelle représentative de la filière plasturgie et composites, nous a confié la conception et le développement d’une application en réalité mixte destinée à la formation technique.

Une formation immersive au cœur d’un scénario réaliste

L’utilisateur est placé dans un atelier virtuel, devant un établi où se trouve la pièce à réparer. À sa droite, un panneau d’instructions interactif affiche les étapes à suivre, accompagnées d’une voix off qui guide l’utilisateur tout au long de l’exercice. Ce dispositif favorise l’autonomie tout en assurant une progression structurée et intuitive.

La particularité de cette expérience réside dans son approche pratique : l’apprenant manipule directement les outils virtuels avec ses mains, grâce au hand tracking du casque Meta Quest 3. Aucun contrôleur n’est nécessaire, ce qui renforce la réalisme de la gestuelle et l’immersion dans l’environnement.

Des manipulations concrètes et techniques

Au fil de l’exercice, l’utilisateur doit exécuter une série d’actions précises qui reproduisent les gestes réels d’un technicien.
Parmi ces actions :

  • Prendre une clé Allen pour démonter certaines parties de la pièce défectueuse.
  • Utiliser un micromètre afin de vérifier l’étanchéité et les dimensions avec précision.
  • Remplacer la pièce endommagée par une nouvelle.
  • Effectuer les vérifications finales pour s’assurer que la réparation est correctement réalisée.

Chaque étape est accompagnée d’indications visuelles claires et d’un retour sonore qui confirme la bonne exécution de l’action, afin de renforcer l’apprentissage par la pratique.

Deux scénarios pédagogiques pour diversifier la formation

L’application est structurée en deux scénarios distincts, permettant aux apprenants de se confronter à plusieurs types de pannes et de procédures de réparation. Cette approche progressive favorise la montée en compétence et permet d’adapter la difficulté en fonction du niveau de l’utilisateur.

Chaque scénario met l’accent sur la rigueur technique et la compréhension des étapes de maintenance, tout en restant dans un cadre sécurisé, sans matériel physique ni risque d’erreur coûteuse. C’est une manière efficace d’apprendre en faisant, au plus proche de la réalité terrain.

Une expérience intuitive grâce au hand tracking

L’un des points forts de ce projet repose sur l’utilisation du hand tracking, une technologie qui détecte les mouvements des mains de l’utilisateur en temps réel. Elle permet une interaction naturelle et fluide avec les éléments virtuels : l’apprenant saisit une clé, ajuste une pièce ou manipule un outil comme dans la réalité.

Cette approche supprime la barrière technologique liée à l’utilisation de manettes et rend la prise en main immédiate, même pour des publics peu familiers avec les outils XR. Elle contribue aussi à reproduire fidèlement les gestes techniques nécessaires à la formation professionnelle.

Un outil immersif au service de la pédagogie industrielle

Grâce à cette application en réalité mixte, Polyvia dispose désormais d’un outil de formation flexible et innovant, capable de s’adapter à différents contextes : formation initiale, perfectionnement, démonstration ou sensibilisation.

Elle permet aux apprenants de se former n’importe où, sans avoir besoin d’un poste physique ou d’un formateur présent en permanence. Les erreurs sont simulées et guidées, ce qui facilite la compréhension et la mémorisation des procédures. Ce type de solution répond à un véritable enjeu de modernisation des formations industrielles, en associant réalisme technique et simplicité logistique.

Une réalisation complète signée 3DCREATION

Pour mener à bien ce projet, l’équipe 3DCREATION a assuré l’ensemble du processus de production :

  • Conception pédagogique et scénarisation des étapes de formation en collaboration avec Polyvia.
  • Modélisation 3D réaliste de l’établi, des pièces et des outils.
  • Développement en réalité mixte avec intégration du hand tracking.
  • Mise en place des interactions techniques précises (manipulation d’outils, ajustement de pièces, mesures).
  • Création des interfaces et intégration de la voix off pour le guidage utilisateur.
  • Optimisation de l’expérience pour une utilisation fluide sur casque XR.

Cette maîtrise complète nous permet de livrer à nos clients des solutions clé en main prêtes à être déployées dans leurs programmes de formation.

Conclusion

Avec cette application en réalité mixte, Polyvia se dote d’un outil pédagogique innovant, capable de former efficacement des apprenants à des gestes techniques précis, tout en réduisant les contraintes matérielles et logistiques.

Ce projet illustre parfaitement notre capacité à conjuguer expertise XR, pédagogie interactive et réalisme industriel pour créer des expériences immersives à fort impact. Chez 3DCREATION, nous croyons que l’avenir de la formation professionnelle passe par des outils immersifs accessibles, pratiques et engageants.

Techniques mises en œuvre

Un projet comme celui-ci ?