L’AP-HP a organisé ce mardi 05 décembre 2017, en partenariat avec TeraRecon, Vizua, Microsoft et Evolutis numérique, la retransmission en direct de la 1ère intervention chirurgicale au monde réalisée avec une plateforme collaborative de réalité mixte à l’hôpital Avicenne AP-HP, et en interaction avec des médecins à distance.
Une première mondiale réalisée à l’hôpital Avicenne AP-HP
Le Dr Thomas Grégory, chef du service de chirurgie orthopédique et traumatologique de l’hôpital Avicenne AP-HP (spécialisé dans la chirurgie de la main et du membre supérieur) a réalisé ce mardi 05 décembre 2017, une opération de l’épaule, assisté de la plateforme HoloPortal de TeraRecon et de l’ordinateur holographique HoloLens de Microsoft.
Pendant l’intervention, le Dr Grégory a pu visualiser, en hologrammes, les modélisations 3D des clichés anatomiques de son patient, projetées en temps réel dans le bloc opératoire grâce à HoloLens. Il a aussi pu accéder à des données médicales du patient (projetées ou non sur le patient lui-même) et à des tutoriels interactifs pendant l’opération.
Le Dr Grégory a également échangé pendant l’intervention chirurgicale via Skype avec les Pr Emery et Dr Reilly (Imperial College, Londres, Angleterre), le Pr Yan Lae Moon (Hôpital Universitaire de Chosun, Corée du sud), le Dr John Sledge (Hôpital Lafayette, Louisiane, USA) et le Dr April Armstrong (Pennsylvanie, USA) qui pouvaient interagir lors de la chirurgie par hologrammes interposés.
C’est la première fois au monde qu’une utilisation aussi complète des aspects immersifs et collaboratifs de ce dispositif de réalité mixte est faite dans un bloc opératoire tout en conservant une qualité d’images holographiques optimale.
La réalisation de cette opération positionne ainsi l’hôpital Avicenne AP-HP comme un site pilote pour l’utilisation de la réalité mixte de Microsoft en pratique courante, dans les spécialités chirurgicales et médicales à actes techniques.
Une intervention chirurgicale interactive et innovante
La réalité mixte permet de vivre des expériences holographiques tout en restant en lien avec le monde extérieur.
HoloLens est un ordinateur autonome qui ne nécessite aucun câble. Porté comme un casque par le chirurgien pendant l’opération, il lui permet de capturer les informations de l’environnement dans lequel il se trouve grâce à ses micros et capteurs intégrés et de les partager avec d’autres personnes, au bloc ou à distance via Skype. Le chirurgien garde une totale liberté de mouvement et d’action dans un environnement enrichi d’hologrammes et d’informations à sa demande.
Connectée à HoloLens, la plateforme HoloPortal qui a été spécifiquement développée par TeraRecon et Vizua et qui utilise la puissance de calcul du Cloud Azure de Microsoft, permet au chirurgien de visualiser en temps réel les informations médicales du patient susceptibles de lui être utiles pendant l’opération : ses rapports médicaux, ses bilans biologiques numérisés, l’imagerie 2D (coupes radiologiques natives). Le chirurgien peut aussi accéder directement aux scanners et IRM (sans conversion préalable des modèles/formats).
Les apports de la réalité mixte dans la prise en charge du patient
Depuis la consultation pré-opératoire jusqu’au bilan post-opératoire, la réalité mixte améliore la visualisation des images médicales du patient.
Elle peut être utilisée à différentes étapes de la prise en charge du patient pour :
> informer le patient en consultation sur sa pathologie et l’intervention à programmer. Le patient se retrouve ainsi acteur de son propre parcours de soin et peut s’approprier son opération ;
> échanger en discussion pluridisciplinaire sur des cas pathologiques spécifiques ou une intervention difficile. Une réunion immersive permet aux équipes médicales et soignantes de visualiser un double virtuel du patient dans une salle de réunion ;
> accéder aux informations médicales du patient en amont et pendant l’opération ;
> évoquer avec le patient et ses confrères l’acte chirurgical qui a été réalisé. La réalité mixte peut en effet contribuer à la formation des chirurgiens et à l’acquisition de nouvelles techniques et compétences.
Grâce à la réalité mixte, le chirurgien bénéficie d’une aide supplémentaire dans sa pratique de la médecine. En facilitant son interaction avec les informations susceptibles de lui être utiles, elle contribue aussi à réduire le temps d’intervention pour une meilleure prise en charge des patients.
>> Revoir l’opération réalisée à l’hôpital Avicenne AP-HP le 05 décembre 2017 et diffusée sur la Chaine Youtube de l’AP-HP.
