Quelles sont mes chances de mourir après avoir avalé un cure-dent ?

Dois-je consulter un médecin après m'être cogné la tête contre une barre métallique en courant ?

Suis-je susceptible de devenir aveugle après avoir reçu des éclaboussures d'eau de Javel dans les yeux ?

Une nouvelle étude menée par des chercheurs de l'UC San Diego explore la manière dont l'intelligence artificielle se compare à l'expertise humaine dans la tâche quotidienne consistant à répondre rapidement aux questions médicales de routine.

Paru vendredi dans la revue médicale JAMA médecine internel'article constate que ChatGPT, le chatbot qui bouleverse le monde avec une étendue de formation apparemment infinie, a pu plus que tenir le coup lorsque ses réponses ont été jugées par un panel d'experts par rapport à celles faites par des médecins en chair et en os.

Les évaluateurs ont constaté qu'ils « préféraient les réponses du chatbot aux réponses des médecins », dans 78 % des évaluations effectuées. De plus, les réponses des chatbots se sont avérées d'une "qualité nettement supérieure" à celles des humains. Et, en termes d'empathie, un domaine où les gens semblent intuitivement avoir un avantage, le silicium a de nouveau excellé.

"Les réponses des chatbots ont été jugées significativement plus empathiques que les réponses des médecins", indique le document.

Malgré les résultats déséquilibrés, les auteurs de cet article disent que les médecins devraient être enthousiasmés par ce qu'ils montrent.

John W. Ayers, l'épidémiologiste informatique de l'UCSD qui a dirigé le processus de collecte et d'analyse des données, a déclaré qu'il pensait que l'intelligence artificielle changerait la donne pour la médecine dans sa capacité à alléger les charges de travail tout en améliorant simultanément la qualité pour les patients.

"Tellement plus de patients qui n'obtiennent maintenant aucune réponse ou une mauvaise réponse pourront obtenir des réponses d'un médecin équipé d'IA qui pourra servir beaucoup plus de patients", a déclaré Ayers.

Les résultats de cet article, cependant, testent un ensemble très spécifique de circonstances relatives aux communications textuelles entre médecins et patients et ne se généralisent pas aux milieux cliniques.

Les chercheurs ont tiré 195 questions sélectionnées au hasard dans la sous-section Ask a Doctor de Reddit.com, le site de discussion et d'agrégation de nouvelles populaire. Le groupe, qui compte près de 500 000 membres, permet à quiconque de poser publiquement toutes les questions qu'il souhaite aux médecins dont les qualifications sont vérifiées par Reddit.

Étant donné que les questions et les réponses sont toutes rendues publiques pour que quiconque sur Internet puisse les lire, les transmettre à ChatGPT ne nécessite aucune magie particulière des données.

"Honnêtement, c'est juste plug-and-play", a déclaré Ayers dans un e-mail. "Nous n'avons fait que couper et coller les questions dans ChatGPT et enregistrer la réponse."

Aucun raffinement supplémentaire n'a été apporté, a-t-il déclaré, après que le chatbot ait fourni une réponse.

Les réponses du chatbot avaient tendance à être beaucoup plus verbeuses et amicales, tandis que celles des médecins étaient clairement anéanties par une personne chroniquement occupée qui comptait sur la sténographie pour être aussi efficace que possible.

En répondant à la question du cure-dent avalé, par exemple, la réponse du médecin commence "Si vous avez dépassé 2-6 h ??, il y a de fortes chances qu'ils soient passés dans vos intestins. Ce qui signifie qu'ils ne peuvent pas être récupérés facilement."

ChatGPT commence moins cliniquement par : "Il est naturel de s'inquiéter si vous avez ingéré un objet étranger, mais dans ce cas, il est très peu probable que le cure-dent que vous avez avalé vous cause un préjudice grave."

C'est une réponse fluide, surtout pour quelqu'un qui existe sur un serveur quelque part.

La question sur les blessures à la tête concernant le fait de frapper une barre de métal lors d'une course montre que les chatbots ont simplement le temps d'être plus complets.

La réponse du médecin signale consciencieusement huit symptômes qui devraient amener la personne à consulter un médecin, notamment des nausées ou des vomissements, des étourdissements, des maux de tête graves ou qui s'aggravent, une perte de conscience, de la confusion, une raideur de la nuque, des problèmes de vision et une faiblesse des membres, concluant : "Si vous développez l'un de ces symptômes dans les prochaines 24 heures, précipitez-vous aux urgences."

Le chatbot fournit un ensemble plus complet de symptômes, indiquant au patient de se méfier de la perte de conscience "même si ce n'est que pour quelques secondes", et comprend des troubles de l'élocution, des difficultés d'équilibre ou de coordination, des convulsions, des changements de comportement ou de personnalité et liquide clair s'écoulant du nez ou des oreilles."

Et, là encore, le chatbot est capable d'ajouter un petit soin supplémentaire que le médecin était probablement trop occupé pour taper.

"Bien qu'il soit possible que vous alliez bien, il est important d'être évalué par un professionnel de la santé pour exclure toute blessure grave", indique la réponse du chatbot. "Il est possible que vous ayez subi une commotion cérébrale ou une autre blessure à la tête, même si vous n'avez pas perdu connaissance."

Le Dr David "Davey" Smith, chef de la recherche sur les maladies infectieuses à l'UCSD et l'un des médecins chargés d'évaluer chaque paire de réponses aux questions, a déclaré qu'il avait trouvé la capacité du chatbot à répondre aux questions médicales choquante, même en sachant que ChatGPT a déjà réussi passé des examens de licence médicale.

"Il semblait qu'il pouvait lire dans le message du patient qu'il était anxieux ou triste ou, vous savez, qu'il avait des émotions attachées à ces questions", a déclaré Smith. "Non seulement c'était plus précis, parce qu'il avait toutes les informations à portée de main, c'est vrai, mais c'était aussi empathique, ce qui était plutôt cool."

Mais ce médecin, qui voit des patients tous les jours, craint-il un éventuel remplacement ?

Non pas du tout. L'IA, a-t-il dit, ressemble à un baume plutôt qu'à un irritant.

"Je reçois des e-mails de patients tous les jours et ils posent des questions presque exactement comme celle-ci", a déclaré Smith. "Et je passe environ une heure par jour - d'autres dépensent plus - à parcourir des e-mails et à y répondre le plus rapidement possible, vous savez, à prendre rendez-vous, voici votre ordonnance, c'est juste un accroc ou vous devez aller aux urgences.

"Je n'ai pas non plus le temps d'avoir de l'empathie, j'essaie juste de m'en sortir, mais et si nous avions un moyen par lequel ce programme pourrait nous faciliter la tâche ? Et s'il rédigeait quelque chose à l'avance et que je juste le revoir ?"

Si l'ordinateur a le temps de se référer à la littérature actuelle et de produire des réponses plus complètes, et aussi le temps de montrer un peu plus de preuves de préoccupation pour l'anxiété d'un patient, cela, a-t-il dit, pourrait être révolutionnaire.

Mais, a-t-il ajouté, aucune IA ne donne elle-même des conseils à ses patients. En fin de compte, c'est sa licence médicale qui est en jeu si l'IA se trompe.

"Le bot peut aider au début, mais c'est à moi de signer", a déclaré Smith.

2023 L'Union-Tribune de San Diego.
Distribué par Tribune Content Agency, LLC.