HoloMedX apporte des contrôles personnalisés et des modèles spécifiques aux patients à Looking Glass.
Que se passe-t-il lorsqu’une entreprise de matériel médical commence à explorer la réalité étendue (XR) ? Des choses vraiment incroyables. C’est ce que nous avons appris lorsque Xenco Medical a annoncé HoloMedX lors du sommet mondial de la VR/AR Association au début du mois.
Présentation de Xenco Medical
Xenco Medical est une entreprise qui fabrique des dispositifs médicaux à usage unique. Non seulement les dispositifs à usage unique permettent aux outils de ne pas se dégrader avec le temps, mais ils réduisent également le risque de contamination entre les patients. Les dispositifs sont même fabriqués sur mesure pour des interventions chirurgicales spécifiques et même pour des patients spécifiques.
L’une des priorités de Xenco Medical consiste à aider les équipes médicales à communiquer à la fois avec les étudiants en chirurgie et avec les patients sur le point de subir une intervention. Dans les deux cas, un professionnel de la santé montre à une personne ou à une salle remplie de personnes à quoi ressemble exactement une intervention chirurgicale utilisant les dispositifs de Xenco Medical.
Le seul problème ? Alors que Xenco Medical fabrique des dispositifs chirurgicaux spécifiques aux patients, les opérations chirurgicales étaient démontrées à l’aide de modèles anatomiques disponibles dans le commerce. En particulier dans le cas de la chirurgie de la colonne vertébrale, l’anatomie d’un patient peut être radicalement différente de celle d’un autre. Les modèles médicaux à taille unique sont donc très limités.
Les autres options consistaient à démontrer des opérations chirurgicales sur des images et des scans en deux dimensions, mais la chirurgie est un processus intrinsèquement tridimensionnel. S’il est théoriquement possible de créer des modèles personnalisés à l’aide d’une technologie telle que l’impression 3D, cela prendrait énormément de temps et serait très coûteux. Xenco Medical s’est donc tournée vers la technologie XR et a créé HoloMedX.
« En tant que société centrée sur le patient, nous nous sommes engagés à développer des technologies qui couvrent l’ensemble du spectre de l’expérience chirurgicale du patient », a déclaré Haider dans un communiqué partagé.
Le logiciel derrière HoloMedX
Xenco Medical a mis au point un algorithme d’apprentissage par ordinateur qui utilise la technologie de traçage de rayons pour assembler une série d’images de diagnostic en 2D afin de créer instantanément des modèles 3D spécifiques au patient.
« Nous voulions rendre l’opération aussi transparente que possible afin que l’utilisateur n’ait pas besoin de connaissances techniques pour traduire un ensemble de données DICOM (Digital Imaging and Communications Model in Medicine) en hologramme », explique Haider.
Le résultat est une expérience conviviale, tant pour les experts en chirurgie que pour les patients qui s’informent à l’avance sur leur propre opération. Ce type de compréhension améliore l’expérience et la satisfaction des patients.
« Vous obtenez l’anatomie du patient en suspension dans l’air », a expliqué Haider lors de l’annonce de la plateforme au cours du sommet mondial de la VR/AR Association. « L’objectif est de donner aux patients et aux formateurs en chirurgie une sensation hyperréaliste ».
Affichage de modèles spécifiques aux patients – sans casque VR
La question suivante était de savoir comment afficher les modèles de manière à ce qu’ils soient efficaces pour les enseignants et les apprenants et qu’ils aient un impact sur les patients. La première réponse, la plus évidente, a été d’utiliser un logiciel de modélisation et d’imagerie 3D dans un casque. Outre le fait qu’un casque supprime la communication en face à face pour les patients et les prestataires, il pose un problème de mise à l’échelle.
« Lorsque vous donnez des cours, il peut y avoir dix personnes dans la salle. Lorsqu’elles utilisent toutes un casque, cela constitue un obstacle », explique Haider. « Nous avons choisi de construire notre plateforme en l’intégrant à l’écran à champ lumineux Looking Glass, car cela nous permettait d’utiliser un écran holographique intuitif et interactif sans casque. »
Looking Glass est un écran à champ lumineux qui, lorsqu’il est éteint, ressemble à une grande tablette ou à un petit téléviseur typique. Cependant, lorsqu’il est allumé, il semble projeter un modèle 3D convaincant. C’est une technologie plutôt cool, mais ce n’est pas le seul matériel – ou le plus innovant – qui joue un rôle dans HoloMedX.
Xenco Medical a également créé une gamme de contrôleurs aériens pour HoloMedX, inspirés de véritables outils chirurgicaux. Ces contrôleurs aériens, équipés d’accéléromètres et de gyroscopes à trois axes, contribuent à ajouter une couche supplémentaire de compréhension qui ne serait pas possible si les utilisateurs manipulaient les modèles à l’aide de contrôleurs ou même de commandes gestuelles.
Le logiciel, l’écran et les commandes aériennes personnalisées produisent ensemble « HoloMedX ».
« Nous sommes à l’intersection d’une période incroyablement passionnante où les progrès de l’optique se produisent indépendamment des écrans et des logiciels d’imagerie », a déclaré Haider. « La convergence de ces trois technologies nous place à un précipice important ».
Un aperçu de la feuille de route
Cette année, HoloMedX sera employé avec certaines universités et centres médicaux qui travaillent déjà avec Xenco Medical. Outre les améliorations potentielles de la plate-forme, ce déploiement initial servira de base à une étude unique sur la façon dont l’interaction avec l’hologramme améliore l’expérience du patient.
« Notre étude multicentrique qui débute cette semaine comparera les scores de satisfaction des patients subissant des fusions lombaires à deux et trois niveaux avec et sans simulation holographique préopératoire », a expliqué Haider dans un courriel.
La recherche et le développement de HoloMedX n’attendent pas que les résultats soient connus. HoloMedX est actuellement destiné à des fins strictement éducatives, mais la même technologie est utilisée pour explorer des solutions de diagnostic révolutionnaires. Cette plateforme de diagnostic serait disponible en tant que produit distinct, également auprès de Xenco Medical.
Des utilisateurs qui créent des solutions
HoloMedX ressemble vraiment à l’avenir. Nous n’avons pas (encore) mis la main dessus, mais nous nous sentons probablement dans le futur aussi. Ironiquement, ce qu’il y a de plus excitant, c’est qu’il n’a pas été fabriqué par une société XR. Il utilise la technologie XR, mais sa plus grande force est peut-être qu’il est fabriqué par des personnes qui cherchent à résoudre leurs propres problèmes plutôt que par quelqu’un qui essaie de vendre des solutions.
Les contenus sur les mêmes sujets :
réalité étendue XR, VR et chirurgie
- ThirdEye annonce un fonds d’investissement pour les fournisseurs de logiciels AR
- Inspiration immersive : Pourquoi l’apprentissage en réalité étendue a un potentiel multisectoriel
- Des médecins pratiquent la chirurgie à l’aide de la RV !
- Un prix de 100K $ attend les créateurs de XR conscients du changement climatique
- Unity et Volvo : modèles numériques de conception de voitures en open source
- La vie professionnelle durant le coronavirus : L’utilisation de la XR pour le travail à distance
- Cannes XR 2020 s’agrandit en partenariat avec Positron, un nouveau lieu et un nouveau prix sont annoncés
- Comment et pourquoi l’engagement de la marque est le moteur du développement XR
- Guide du tutoriel LIV VR : Enregistrement vidéo en réalité mixte sur Oculus Quest
- La réalité virtuelle change le domaine de la chirurgie !