Évaluation de la vidéo immersive dans la transmission des techniques chirurgicales pour la définition d’un nouveau standard. Vers un continuum pédagogique en associant l’intelligence artificielle
Frederic Teboul , Crina-Victoria Onciu , Maxime Ros
{"title":"Évaluation de la vidéo immersive dans la transmission des techniques chirurgicales pour la définition d’un nouveau standard. Vers un continuum pédagogique en associant l’intelligence artificielle","authors":"Frederic Teboul , Crina-Victoria Onciu , Maxime Ros","doi":"10.1016/j.hansur.2024.101811","DOIUrl":null,"url":null,"abstract":"<div><div>La chirurgie de la main est complexe et techniquement exigeante à appréhender notamment du fait de son anatomie intriquée et de la précision requise. Il est recommandé au niveau global de former plus de chirurgiens pour répondre aux besoins de santés internationaux. La simulation a toute sa place dans le cursus d’apprentissage, mais malheureusement les outils sont parfois très onéreux. La vidéo s’est considérablement développée grâce à son accessibilité, toutefois, la qualité des images et la technique filmée pose régulièrement des problèmes. Il est ici envisagé le développement d’un nouveau standard de film pédagogique permettant dans un deuxième temps la création de simulateurs.</div><div>La méthode REVINAX a été utilisée pour évaluer son application dans des procédures chirurgicales du membre supérieur. L’opérateur porte un harnais surmonté d’un bras, équipé de deux caméras fixées sur un stabilisateur afin de capter en stéréoscopie son point de vue (première personne). Les vidéos ont ensuite été éditées, synchronisées, chapitrées et intégrées dans un environnement de Réalité Étendue pour réaliser des tutoriels immersifs. Les vidéos ont par ailleurs été traitées avec des algorithmes d’Intelligence artificielle (photogrammétrie pour la reconstruction statique, Gaussian Splatting pour la reconstruction dynamique) afin de réaliser les premières reconstructions volumétriques.</div><div>Quatre chirurgies ont été tournées (canal carpien, maladie de Dupuytren, doigt à ressaut, nerf ulnaire au coude). L’ergonomie de la captation tout comme l’expérience utilisateur en immersion sont excellentes. Une reconstruction volumétrique dynamique a été testée sur la vidéo du nerf ulnaire avec des algorithmes de Gaussian Splatting.</div><div>Nous savons que le point de vue première personne permet de diminuer les erreurs. Ceci est potentialisé lorsqu’il est projeté en réalité virtuelle. Les reconstructions volumétriques demandent un processus spécifique à mettre en place dès la captation afin d’augmenter la résolution nécessaire à l’apprentissage. Les tutoriels immersifs représentent un pas en avant vers la définition d’un nouveau standard dans le cadre de l’apprentissage associant <em>blended learning</em> et <em>micro-learning</em>. Leur disponibilité sur smartphone permet de transmettre nos connaissances à très grande échelle. Le compagnonnage chirurgical sera diffusé à grande échelle, avec une amélioration qualitative et interactive.</div><div>Il est envisageable de réaliser un précis de technique chirurgicale interactif. L’évolution rapide de l’Intelligence Artificielle laisse entrevoir à court terme la possibilité d’utiliser ces ressources vidéos immersives pour réaliser des reconstructions volumétriques avec lesquelles interagir pour créer des simulateurs accessible au plus grand nombre créant ainsi un continuum pédagogique depuis l’apprentissage mimétique au constructivisme.</div></div>","PeriodicalId":54301,"journal":{"name":"Hand Surgery & Rehabilitation","volume":"43 6","pages":"Article 101811"},"PeriodicalIF":0.9000,"publicationDate":"2024-12-01","publicationTypes":"Journal Article","fieldsOfStudy":null,"isOpenAccess":false,"openAccessPdf":"","citationCount":"0","resultStr":null,"platform":"Semanticscholar","paperid":null,"PeriodicalName":"Hand Surgery & Rehabilitation","FirstCategoryId":"3","ListUrlMain":"https://www.sciencedirect.com/science/article/pii/S2468122924002421","RegionNum":4,"RegionCategory":"医学","ArticlePicture":[],"TitleCN":null,"AbstractTextCN":null,"PMCID":null,"EPubDate":"","PubModel":"","JCR":"Q4","JCRName":"ORTHOPEDICS","Score":null,"Total":0}
引用次数: 0
Abstract
La chirurgie de la main est complexe et techniquement exigeante à appréhender notamment du fait de son anatomie intriquée et de la précision requise. Il est recommandé au niveau global de former plus de chirurgiens pour répondre aux besoins de santés internationaux. La simulation a toute sa place dans le cursus d’apprentissage, mais malheureusement les outils sont parfois très onéreux. La vidéo s’est considérablement développée grâce à son accessibilité, toutefois, la qualité des images et la technique filmée pose régulièrement des problèmes. Il est ici envisagé le développement d’un nouveau standard de film pédagogique permettant dans un deuxième temps la création de simulateurs.
La méthode REVINAX a été utilisée pour évaluer son application dans des procédures chirurgicales du membre supérieur. L’opérateur porte un harnais surmonté d’un bras, équipé de deux caméras fixées sur un stabilisateur afin de capter en stéréoscopie son point de vue (première personne). Les vidéos ont ensuite été éditées, synchronisées, chapitrées et intégrées dans un environnement de Réalité Étendue pour réaliser des tutoriels immersifs. Les vidéos ont par ailleurs été traitées avec des algorithmes d’Intelligence artificielle (photogrammétrie pour la reconstruction statique, Gaussian Splatting pour la reconstruction dynamique) afin de réaliser les premières reconstructions volumétriques.
Quatre chirurgies ont été tournées (canal carpien, maladie de Dupuytren, doigt à ressaut, nerf ulnaire au coude). L’ergonomie de la captation tout comme l’expérience utilisateur en immersion sont excellentes. Une reconstruction volumétrique dynamique a été testée sur la vidéo du nerf ulnaire avec des algorithmes de Gaussian Splatting.
Nous savons que le point de vue première personne permet de diminuer les erreurs. Ceci est potentialisé lorsqu’il est projeté en réalité virtuelle. Les reconstructions volumétriques demandent un processus spécifique à mettre en place dès la captation afin d’augmenter la résolution nécessaire à l’apprentissage. Les tutoriels immersifs représentent un pas en avant vers la définition d’un nouveau standard dans le cadre de l’apprentissage associant blended learning et micro-learning. Leur disponibilité sur smartphone permet de transmettre nos connaissances à très grande échelle. Le compagnonnage chirurgical sera diffusé à grande échelle, avec une amélioration qualitative et interactive.
Il est envisageable de réaliser un précis de technique chirurgicale interactif. L’évolution rapide de l’Intelligence Artificielle laisse entrevoir à court terme la possibilité d’utiliser ces ressources vidéos immersives pour réaliser des reconstructions volumétriques avec lesquelles interagir pour créer des simulateurs accessible au plus grand nombre créant ainsi un continuum pédagogique depuis l’apprentissage mimétique au constructivisme.
期刊介绍:
As the official publication of the French, Belgian and Swiss Societies for Surgery of the Hand, as well as of the French Society of Rehabilitation of the Hand & Upper Limb, ''Hand Surgery and Rehabilitation'' - formerly named "Chirurgie de la Main" - publishes original articles, literature reviews, technical notes, and clinical cases. It is indexed in the main international databases (including Medline). Initially a platform for French-speaking hand surgeons, the journal will now publish its articles in English to disseminate its author''s scientific findings more widely. The journal also includes a biannual supplement in French, the monograph of the French Society for Surgery of the Hand, where comprehensive reviews in the fields of hand, peripheral nerve and upper limb surgery are presented.
Organe officiel de la Société française de chirurgie de la main, de la Société française de Rééducation de la main (SFRM-GEMMSOR), de la Société suisse de chirurgie de la main et du Belgian Hand Group, indexée dans les grandes bases de données internationales (Medline, Embase, Pascal, Scopus), Hand Surgery and Rehabilitation - anciennement titrée Chirurgie de la main - publie des articles originaux, des revues de la littérature, des notes techniques, des cas clinique. Initialement plateforme d''expression francophone de la spécialité, la revue s''oriente désormais vers l''anglais pour devenir une référence scientifique et de formation de la spécialité en France et en Europe. Avec 6 publications en anglais par an, la revue comprend également un supplément biannuel, la monographie du GEM, où sont présentées en français, des mises au point complètes dans les domaines de la chirurgie de la main, des nerfs périphériques et du membre supérieur.