Le traitement du cancer est trop « nuancé » pour ChatGPT, selon le général Brigham

Bien que ChatGPT se soit montré prometteur dans la sélection de tests d’imagerie et l’identification de diagnostics, il a nettement moins bien réussi à recommander des traitements contre le cancer.

C’est selon un nouveau étude des chercheurs du Brigham and Women’s Hospital de Boston, qui ont découvert que dans un tiers des cas, les recommandations du GPT-3.5 allaient à l’encontre des directives de traitement du National Comprehensive Cancer Network. La recherche a été publiée le 24 août dans JAMA Oncologie.

“Les réponses de ChatGPT peuvent ressembler beaucoup à celles d’un humain et peuvent être assez convaincantes. Mais lorsqu’il s’agit de prise de décision clinique, il y a tellement de subtilités pour la situation unique de chaque patient”, a déclaré l’auteur correspondant Danielle Bitterman, MD, radio-oncologue à Brigham and Women’s et le programme d’intelligence artificielle en médecine à Somerville, dans le Massachusetts, Mass General Brigham, le 24 août. communiqué de presse. “Une bonne réponse peut être très nuancée, et pas nécessairement quelque chose que ChatGPT ou un autre grand modèle de langage peut fournir.”

Les chercheurs ont demandé à ChatGPT de formuler des recommandations de traitement pour le cancer du sein, du poumon et de la prostate, selon l’étude. Alors que le chatbot IA a fourni au moins une recommandation soutenue par le NCCN dans 98 % des cas, 34 % des réponses ne correspondaient pas aux lignes directrices. ChatGPT a « halluciné » ou inventé des traitements dans 12,5 % des cas.

Le général de masse Brigham a été à l’avant-garde de la recherche sur ChatGPT, complétant également les études sur l’imagerie et le diagnostic. GPT-3.5 est la version gratuite de ChatGPT, qui propose également la mise à jour GPT-4 disponible moyennant un abonnement payant.