IA : de l'eau dans le gaz ?

 
 

"Les modèles génératifs sont un élément clé de la créativité des machines, car ils leur permettent d'aller au-delà de ce qu'elles ont vu auparavant et de créer quelque chose de nouveau. " Ian Goodfellow

 "L'IA générative a ouvert des possibilités passionnantes dans le domaine des images et des vidéos. Ses capacités de manipulation et de transformation offrent de nouvelles voies pour l'expression artistique, la création de contenu et la narration immersive. Alors que cette technologie continue d'évoluer, il est essentiel d'exploiter son pouvoir de manière responsable et de veiller à ce qu'elle ait un impact positif sur la société." Mohith Agadi

 

 
Tai-Seale M, Baxter SL, Vaida F, Walker A, Sitapati AM, Osborne C, Diaz J, Desai N, Webb S, Polston G, Helsten T, Gross E, Thackaberry J, Mandvi A, Lillie D, Li S, Gin G, Achar S, Hofflich H, Sharp C, Millen M, Longhurst CA. AI-Generated Draft Replies Integrated Into Health Records and Physicians' Electronic Communication.

Projets de réponses générés par l'IA  intégrés aux dossiers de santé et aux communications électroniques des médecins

JAMA Netw Open. 2024 Apr 1;7(4):e246565. doi: 10.1001/jamanetworkopen.2024.6565. PMID: 38619840; PMCID: PMC11019394.
https://pubmed.ncbi.nlm.nih.gov/38619840/
Article libre d'accès

Contexte

Des tests opportuns sont justifiés pour évaluer l'association entre l'utilisation de l'intelligence artificielle générative (GenAI) et les efforts de travail des médecins.

Objectif 

étudier l'association entre les réponses rédigées par GenAI pour les messages des patients et le temps passé par le médecin à répondre aux messages et la longueur des réponses.

Conception, cadre et participants 

Etude randomisée d'amélioration de la qualité (AQ) des listes d'attente de juin à août 2023 dans un système de santé universitaire. Les médecins de soins primaires ont été randomisés dans un groupe d'activation immédiate et un groupe d'activation retardée. Les données ont été analysées d’août à novembre 2023

Exposition

 
accès aux réponses rédigées par GenAI pour les messages des patients.

Principaux résultats et mesures 

Le temps passé à  :

(1) lire les messages
(2) répondre aux messages
(3) longueur des réponses 
(4) probabilité du médecin de recommander des ébauches de GenAI.

L'hypothèse a priori était que les brouillons GenAI seraient associés à moins de temps passé par le médecin à lire et à répondre aux messages. Un modèle à effets mixtes a été utilisé.

Résultats : Cinquante-deux médecins ont participé à cette étude QI, dont 25 randomisés dans le groupe d'activation immédiate et 27 randomisés dans le groupe d'activation retardée. Un groupe témoin contemporain comprenait 70 médecins. Il y avait 18 participantes (72,0 %) dans le groupe immédiat et 17 participantes (63,0 %) dans le groupe différé ; la tranche d'âge médiane était de 35 à 44 ans dans le groupe immédiat et de 45 à 54 ans dans le groupe différé. Le temps médian (IQR) passé à lire les messages dans le groupe immédiat était de 26 (11-69) secondes au départ, de 31 (15-70) secondes 3 semaines après le début de l'intervention et de 31 (14-70) secondes 6 semaines après. entrée. Le temps de lecture médian (IQR) du groupe retardé était de 25 (10-67) secondes au départ, de 29 (11-77) secondes pendant la période d'attente de 3 semaines et de 32 (15-72) secondes 3 semaines après le début de l'intervention. . Les temps de lecture médians (IQR) du groupe témoin contemporain étaient de 21 (9-54), 22 (9-63) et 23 (9-60) secondes dans les périodes correspondantes. L'association estimée de GenAI était une augmentation de 21,8 % du temps de lecture (IC à 95 %, 5,2 % à 41,0 % ; P = 0,008), une modification de -5,9 % du temps de réponse (IC à 95 %, -16,6 % à 6,2 % ; P = 0,33) et une augmentation de 17,9 % de la longueur des réponses (IC à 95 %, 10,1 % à 26,2 % ; P < 0,001). Les participants ont reconnu la valeur de GenAI et ont suggéré des domaines d'amélioration.

zoi240254f1 1712593629.29656
Temps de lecture par message (en secondes) pour chaque groupe et période d'étude

Conclusions et pertinence 

Dans cette étude QI, les réponses rédigées par GenAI étaient associées à un temps de lecture considérablement augmenté, à aucun changement dans le temps de réponse, à une longueur de réponse considérablement accrue et à certains avantages perçus.

Des tests empiriques rigoureux sont nécessaires pour examiner plus en détail les performances de GenAI.

Les études futures devraient examiner l’expérience des patients et comparer plusieurs GenAI, y compris ceux ayant une formation médicale.

Les performances actuelles de GenAI suggèrent que la contribution humaine reste essentielle. 

Des efforts supplémentaires sont également nécessaires pour comparer plusieurs GenAI, y compris ceux ayant une formation médicale spécifique, afin d'améliorer la pertinence des projets de réponses et d'identifier les GenAI validés afin d'offrir un service de haute qualité au public

EXEMPLE

Exemples de réponses rédigées par GenAI et de réponses envoyées par des médecins

  IA


 La  réponse rédigée par GenAI comportait 103 mots et 498 caractères sans espaces, et peut être vue ici :
 

Bonjour [nom du patient], je suis heureux d'apprendre que votre douleur au genou s'est améliorée d'elle-même. Concernant votre douleur au coude, il est important que nous discutions de vos symptômes et évaluions la meilleure marche à suivre. Il peut être nécessaire d'envisager une radiographie ou une référence pour une thérapie physique, mais nous pouvons le déterminer lors de votre rendez-vous le [date]. Quant aux résultats de vos tests, aucun résultat n’est disponible pour le moment. Lorsque les résultats sont disponibles, vous pouvez les consulter dans MyChart sous « Résultats des tests ». Si vous avez d'autres préoccupations ou questions, n'hésitez pas à prendre un rendez-vous supplémentaire pour en discuter en personne. Cordialement, [nom de l'employé d'Epic] Une partie de ce message a été générée automatiquement et a été examinée et modifiée par [nom de l'employé d'Epic].

          

La réponse du médecin comptait 59 mots et 252 caractères sans espaces et est la suivante :

          

Bonjour [nom du patient], je suis heureux d'apprendre que votre douleur au genou s'est améliorée d'elle-même. Concernant votre douleur au coude, à moins d’avoir eu une blessure aiguë comme une chute ou un impact, il est peu probable que les radiographies en montrent beaucoup. Je préférerais de loin que vous preniez ou respectiez le rendez-vous du [date] pour un bon examen avant de vous exposer aux radiographies. Cordialement, [nom du médecin], MD [Signature dérivée du mot de passe d'accès contrôlé] Une partie de ce message a été générée automatiquement et a été révisée et modifiée par [nom du médecin, MD].

          

Les similitudes entre les 2 réponses comprenaient la reconnaissance de l'amélioration de la douleur au genou du patient, la réponse aux préoccupations du patient concernant la douleur au coude et la fourniture de conseils sur les prochaines étapes, ainsi que l'expression de son inquiétude quant au bien-être du patient. Toutefois, des différences substantielles existaient également. Le projet GenAI fournissait des conseils cliniques (« envisagez une radiographie ou une thérapie physique »), ce qui sortait de son champ d'application. Le médecin a rédigé une réponse plus succincte et directe, avec une approche plus prudente, en donnant la priorité à un examen physique approfondi. Seule la première phrase du projet a été retenue par le médecin.

Commentaire

Je réponds directement au patient par téléphone ou  par mail, c'est possible si on connaît bien le patient, sa pathologie et son traitement en cours.  Le médecin doit répondre car il engage sa responsabilité. GenAI n'est responsable de rien.Le plus souvent le problème est réglé rapidement. Je suis pour l'IA mais pas du tout pour cette utilisation. Aucune IA pour l'instant ne connaît mieux le patient que son médecin. Cette assistance par GenIA à la bureautique est une perte de temps pour le médecin, une perte de confiance pour le patient.

Alors pourquoi avoir ciblé cet article ?

Tout simplement pour montrer les limites  de l'IA dans cette application de génération automatique de texte.

Par contre si je pouvais disposer d'une IA fiable pour m'aider à prolonger ou non un traitement anticoagulant ou pour pérdire une récidive de MTEV, alors oui ++++

Mais attention l'exercice de la médecine doit rester un exercice humain et plein d'humanité.
 
Quand un patient pose une question c'est qu'il est : soit inquiet , soit qu'il na pas compris un point particulier.

De plus entendre ou lire son médecin le rassure.

La médecine Hippocratique doit rester Hippcratique et non se dématérialiser en une relation avec une machine, si intelligente soit-elle, et même si elle a été imaginée par un être humain.

Ne perdons pas de vue que l'exercice de la médecine en 2024 doit rester celle du colloque singulier, patient /médecin.

L'IA est et sera de plus en plus utile en médecine, mais c'est un outil, et tous les outils en médecine se maîtrisent.

La délégation de tâche en médecine par une IA, oui pour la technique, non pour la décision médicale ! 

Le temps médical doit rester un temps médical, avec toutes ses spécificités, que sont, l'écoute, le partage, la compassion, l'éthique, la tolérance etc.
 
Les éléments de #AI façonnent notre avenir !  De #NeuralNetworks à #robotics , ce domaine est vaste et passionnant. Pour obtenir des informations qui relient les points entre la technologie et le progrès, suivez @ingliguori . Obtenez votre avantage numérique avec « The Digital Edge » chez https://bit.ly/3u4pILl