ChatGPT, meilleur psychiatre que les professionnels de la spécialité ?
Lorsqu’un tuto « Comment transformer ChatGPT en thérapeute ? » fait 5,3 millions de vues, il y a de quoi s’interroger, d’autant qu’une étude parue récemment dans le JAMA Internal Medicine constatait que les réponses apportées par ChatGPT à 195 questions étaient plus appropriées dans 78,6 % des cas que celles de médecins aguerris.
On ne reviendra pas ici sur la manière dont cette intelligence artificielle a intégré les données, mais on se posera clairement la question avec Antoine Baldacci et Etienne-Karl de Duranté (psychiatres à l'APHP) de savoir si ChatGPT a des connaissances médicales et s'il peut être une aide pertinente pour le médecin.
Un parcours de la littérature permet de constater que GPT-4 obtient à l'USMLE (United States Medical Licence Arm), l'examen de médecine certifiant américain, 90 % de bonnes réponses alors que 65 % suffisent pour obtenir la licence. Le même constat a été fait au Japon où ChatGPT-4 obtient un score de 70,1 % au GM-ITE (General Medicine In-Training Examination) alors que les internes en médecine générale obtiennent un score moyen de 55,8 %. Par ailleurs une étude néerlandaise qui portait sur 40 questions (épidémiologie, traitement et diagnostic) de psychiatrie a montré que ChatGPT-3 seul obtenait 8/10 en moyenne, meilleure que lorsque le psychiatre travaillait avec ChatGPT (7,6/10) ou sans (6,7/10 en moyenne). Enfin, une étude israélienne a montré que ChatGPT faisait aussi bien que les cliniciens pour évaluer le risque suicidaire…
Vous désirez lire la suite de cet article ?
Inscrivez-vous