Interface principale de l'application médicale - Téléconsultation 3D avec eye-tracking Leia
VivaTech Medical App
Application de téléconsultation médicale avec technologie 3D et eye-tracking
Projet réalisé lors du stage chez EPICNPOC pour VivaTechVue d'ensemble du projet
Le projet visait à développer une application innovante de téléconsultation médicale pour un écran 3D avec eye-tracking Leia. Cette solution permettait aux médecins de partager des visualisations d'organes en 3D avec leurs patients lors de consultations à distance, offrant une expérience interactive et immersive.
Défi technique principal : Assurer la réception et l'affichage en temps réel d'objets 3D, de messages et de vidéos sans recompilation de l'application.
Objectifs du projet
- Développer une application fonctionnant sur tablettes 3D Leia avec eye-tracking
- Créer plusieurs pages : affichage informations patient et visioconférence
- Permettre le partage de visualisations d'organes 3D pendant la consultation
- Assurer l'affichage en temps réel d'objets 3D sans recompilation
- Garantir une interaction fluide avec les éléments 3D via eye-tracking
Méthodologie de développement
Recherche et collecte des exigences
Discussions régulières avec le superviseur et l'expert en design UI. Utilisation de Figma pour la conception des interfaces et intégration des spécifications du plugin Leia.
Développement étape par étape
Développement des fonctionnalités de visioconférence, intégration de la technologie eye-tracking, et implémentation de la réception en temps réel.
Validation des spécifications
Tests sur tablettes 3D Leia et tests finaux chez le client à Paris sur télévision 3D.
Technologies utilisées
Galerie du projet
Interface de visioconférence HD
Partage d'organes 3D en temps réel
Technologie eye-tracking Leia intégrée
Fonctionnalités clés
Visioconférence HD
Communication en temps réel entre médecin et patient avec qualité vidéo haute définition
Partage 3D en temps réel
Visualisation et manipulation d'organes 3D partagés instantanément sans recompilation
Eye-tracking Leia
Interaction fluide avec les éléments 3D grâce à la technologie de suivi oculaire
Écran 3D Leia
Application optimisée pour tablettes 3D Leia offrant une expérience immersive
Interface patient
Page dédiée affichant les informations patient de manière claire et accessible
Temps réel
Réception et affichage instantanés de messages, vidéos et objets 3D
Défis techniques surmontés
Intégration Leia 3D
Maîtrise du plugin Leia pour affichage 3D sans lunettes et eye-tracking
Temps réel sans recompilation
Système de chargement dynamique d'objets 3D sans nécessiter de rebuild
Synchronisation vidéo
Implémentation WebRTC pour visioconférence fluide et stable
UX/UI médicale
Design intuitif adapté au contexte médical et aux besoins des praticiens
Performances 3D
Optimisation du rendu 3D pour maintenir la fluidité sur tablette
Résultats et impact
Livraison réussie
Application complète et fonctionnelle testée avec succès chez le client à Paris sur télévision 3D.
Innovation technologique
Première application de télémédecine combinant 3D sans lunettes et eye-tracking pour EPICNPOC.
Impact médical
Solution permettant des consultations plus immersives et pédagogiques pour les patients.
Présentation VivaTech
Application destinée à être présentée au salon VivaTech, démontrant l'expertise d'EPICNPOC.
Compétences développées
Maîtrise de technologies 3D avancées, WebRTC, eye-tracking, et design d'interfaces médicales.
Particularité du projet
Développement autonome : Contrairement aux autres projets, cette application ne nécessitait pas de connexion au serveur d'EPICNPOC, permettant un développement plus autonome et une architecture simplifiée. L'application fonctionnait de manière indépendante sur les tablettes Leia 3D, facilitant les tests et la présentation client.