ChatGPT склав медичний іспит на право працювати лікарем у США

ChatGPT склав медичний іспит United States Medical Licensing Examination (USMLE) на право працювати лікарем у США.

Чат-бот успішно відповів на 88,9% запитань і завдань тесту з 350 медичних завдань за прохідного порогу в 60%. У рамках наукового дослідження два лікарі-практики оцінювали відповіді ChatGPT, а розбіжності в результатах тесту розглядалися окремо третім експертом.

USMLE (United States Medical Licensing Examination) — це іспит, який достатньо скласти, щоб мати право працювати лікарем у США та низці інших країн (Ізраїль, Нова Зеландія, Катар). Цей тест вважається одним із найскладніших медичних іспитів у світі, а його складання підтверджує високий рівень знань і компетенцій лікаря-початківця, наприклад, для студентів вищих курсів педіатричного спрямування або фахівців загальної практики з інших країн.

Під час перевірки ChatGPT з'ясувалося, що нейромережа надала «принаймні одне важливе відкриття» під час установлення діагнозу, що було «новим, неочевидним та клінічно достовірним» у рамках своїх правильних відповідей.

«Досягнення прохідного бала за цей загальновідомо складний експертний іспит без будь-якої допомоги з боку людини знаменує собою помітну віху в розвитку медичного ШІ», - пояснили ЗМІ дослідники з технологічної компанії AnsibleHealth, які проводили іспит з ChatGPT.

Фахівці AnsibleHealth вважають, що отримані ними результати дають змогу припустити, що ChatGPT може стати цінним інструментом для отримання медичної освіти. Вони розповіли, що чат-бот має часткову здатність викладати медицину, виявляючи нові та неочевидні концепції, які можуть бути недоступні для учнів у першому розумінні.

Одночасно з ChatGPT іспит USMLE складала нейромережа PubMedGPT, навчена виключно на медичній літературі та профільних базах даних. Вона дала лише 50,8% правильних відповідей.

‍