Pouvez-vous compter sur l’IA pour répondre aux questions sur le cancer?

IA réponse aux questions sur le cancer?

Les intelligences artificielles (IA) pourraient ne pas toujours être votre source la plus précise d’informations sur la santé, en particulier en ce qui concerne les soins du cancer, selon une nouvelle recherche.

Deux nouvelles études ont évalué la qualité des réponses fournies par des chatbots d’IA à une variété de questions sur les soins du cancer.

Une de ces études, publiée le 24 août dans JAMA Oncology, s’est concentrée sur le service d’IA conversationnelle en phrases complètes connu sous le nom de ChatGPT, qui a été lancé avec beaucoup d’enthousiasme en novembre dernier.

Le bon côté : environ deux tiers des informations sur le cancer fournies par ChatGPT correspondaient précisément aux directives actuelles du National Comprehensive Cancer Network des États-Unis.

Le revers de la médaille : le reste ne correspondait pas.

“Certaines recommandations étaient clairement totalement incorrectes”, a déclaré l’auteure de l’étude, le Dr Danielle Bitterman, professeure adjointe de radio-oncologie à l’hôpital Brigham and Women’s/Dana-Farber Cancer Institute et à la Harvard Medical School de Boston. “Par exemple, des cas où un traitement curatif était recommandé pour un diagnostic incurable.”

Parfois, les recommandations incorrectes étaient plus subtiles – par exemple, elles incluaient certaines parties seulement d’un plan de traitement, comme recommander uniquement une chirurgie, alors que le traitement standard comprend également la radiothérapie et/ou la chimiothérapie, a déclaré Bitterman.

Cela est préoccupant, selon elle, étant donné que “des informations incorrectes étaient mélangées à des informations correctes, ce qui rendait particulièrement difficile la détection des erreurs, même pour les experts.”

Une deuxième étude publiée dans le même numéro du journal offre une évaluation beaucoup plus positive de l’exactitude des IA.

Dans ce cas, les chercheurs ont examiné les réponses de quatre services de chatbots différents – ChatGPT, Perplexity, Chatsonic et Bing de Microsoft. Chacun a été invité à discuter du cancer de la peau, du poumon, du sein, de la prostate et/ou du côlon.

Les chercheurs ont jugé la qualité et l’exactitude des réponses “bonnes”.

Cependant, selon eux, cela ne signifie pas nécessairement que les patients trouveront l’expérience de l’IA utile. En effet, une grande partie des informations fournies était trop complexe pour la plupart des personnes non professionnelles de la santé.

En même temps, toutes les réponses étaient assorties d’un avertissement général indiquant que les patients ne devaient pas prendre de décisions médicales en se basant sur les données fournies sans consulter d’abord un médecin.

La principale conclusion : de nombreux utilisateurs d’IA sont susceptibles de trouver que les informations médicales générées par les chatbots sont incompréhensibles, impraticables, voire les deux.

“Les résultats étaient encourageants dans le sens où il y avait très peu de désinformation, car c’était notre plus grande préoccupation au départ”, a déclaré l’auteur de l’étude, le Dr Abdo Kabarriti, chef d’urologie à South Brooklyn Health à New York.

“Mais une grande partie des informations, bien qu’exactes, n’étaient pas formulées en termes compréhensibles pour le grand public”, a-t-il ajouté.

Essentiellement, les chatbots fournissaient des informations à un niveau de lecture universitaire, alors que la moyenne des consommateurs lit à peu près au niveau de la sixième année, a déclaré Kabarriti.

Les informations de l’IA reçues par l’équipe de Kabarriti étaient, selon lui, “bien au-delà de cela”.

Un autre facteur qui risque de frustrer de nombreux patients est que l’IA ne vous dira pas quoi faire concernant les symptômes du cancer qu’elle décrit, a déclaré Kabarriti.

“Elle se contentera de dire ‘consultez votre médecin'”, a-t-il dit. “Peut-être y a-t-il une question de responsabilité. Mais le point est que les discussions avec l’IA ne remplacent pas l’interaction que les patients devront avoir avec leurs médecins.”

Le Dr Atul Butte, scientifique en chef des données au sein du système de santé de l’Université de Californie, a rédigé un éditorial accompagnant les études.

Malgré les préoccupations soulevées par les deux études, il considère que l’IA est “un énorme avantage net” pour les patients et la communauté médicale dans son ensemble.

“Je pense que le verre est déjà plus qu’à moitié plein”, a déclaré Butte, notant que avec le temps, les informations fournies par les chatbots deviendront inévitablement de plus en plus précises et accessibles.

Déjà, selon Butte, certaines études ont montré que l’IA a le potentiel d’offrir de meilleurs conseils et même plus d’empathie que les professionnels de la santé.

Selon lui, avec le temps, les chatbots d’IA joueront un rôle de plus en plus important dans la diffusion des informations médicales et les soins. Pour de nombreux patients, l’avantage sera tangible, prédit Butte.

Peu de patients ont les ressources ou le privilège d’aller dans les meilleurs centres médicaux du monde, a-t-il noté.

“Mais imaginez si nous pouvions former l’intelligence artificielle sur les données et les pratiques de ces meilleurs endroits, puis transmettre ces connaissances par le biais d’outils numériques à travers le monde,” soit aux patients via des applications ou aux médecins via des systèmes dossiers médicaux électroniques, a déclaré Butte.

“C’est pourquoi je commence à appeler l’intelligence artificielle ‘privilège scalable'”, a-t-il ajouté. “[C’est] notre meilleur moyen de mettre à l’échelle les soins médicaux privilégiés, que seuls certains peuvent obtenir, à tous.”

DIAPORAMA

Plus d’informations

L’Institut national d’imagerie biomédicale et de bioingénierie des États-Unis propose une vue d’ensemble de l’IA.

SOURCES : Danielle Bitterman, MD, professeur adjoint, radio-oncologie, Brigham and Women’s Hospital/Dana-Farber Cancer Institute et Harvard Medical School, Boston ; Abdo Kabarriti, MD, chef de service, urologie, South Brooklyn Health, New York City ; Atul Butte, MD, PhD, chef scientifique des données, University of California Health System, et professeur et directeur inaugural, Bakar Computational Health Sciences Institute, UC San Francisco ; JAMA Oncology, 24 août 2023