Des chercheurs évaluent les capacités ChatGPT en ORL

Des chercheurs ont soumis à ChatGPT les données d’une quarantaine de patients consultant le service ORL du CHU Saint-Pierre (Bruxelles) afin qu’il propose des diagnostics différentiels, les examens complémentaires à effectuer et une prise en charge thérapeutique. Ses réponses ont été évaluées et comparées avec celles de médecins ORL. ChatGPT a réalisé ses meilleurs résultats dans la proposition de diagnostics différentiels plausibles (90% des cas), du diagnostic le plus plausible (65%) et des options thérapeutiques (60 à 68%). Mais concernant les examens complémentaires, ses performances s’écroulent : dans 55 à 75% des cas, il a oublié des examens indispensables et dans 67 à 90% des cas, il en a prescrit des non nécessaires, certains étant parfois dangereux au vu de des antécédents du patient. 

À noter : ChatGPT n’est pas le seul à s’implanter dans le secteur de la santé, peu à peu l’IA générative trace son sillon. Amazon a par exemple annoncé en juillet le lancement d’une nouvelle solution, HealthScribe.