Исследование, проведенное в стэнфордской школе медицины, показало, что ChatGPT превосходит студентов-медиков первого и второго курсов в ответах на сложные вопросы по клинической медицине. Данный эксперимент, опубликованный в журнале JAMA Internal Medicine, подчеркивает растущее влияние ИИ на медицинское образование и практику и предполагает необходимость корректировки методов обучения будущих врачей.
"Нам не нужны врачи, которые в медицинской школе настолько полагались на ИИ, что не научились самостоятельно разбирать клинические случаи", — говорит соавтор исследования Алисия ДиДжиаммарино, менеджер по образованию в Школе медицины. "Но меня больше пугает мир, в котором врачи не обучены эффективному использованию ИИ, а в современной практике он преобладает".
Более ранние исследования уже демонстрировали способность ChatGPT справляться с вопросами с несколькими вариантами ответов на экзамене на получение медицинской лицензии США (USMLE). Однако авторы из Стэнфорда хотели проверить способность системы ИИ справляться с более сложными открытыми вопросами, используемыми для оценки навыков клинического мышления.
В итоге, результаты показали, что в среднем модель ИИ набрала более четырех баллов по сравнению со студентами-медиками в части экзамена, посвященной анализу конкретных случаев. Этот результат говорит о том, что инструменты ИИ, подобные ChatGPT, могут нарушить традиционное обучение и тестирование врачебного мышления с помощью письменного текста.
Несмотря на впечатляющие характеристики, ChatGPT не лишен недостатков. Наибольшую опасность представляют выдуманные факты или так называемые галлюцинации или конфабуляции. В последней модели OpenAI, GPT-4, доступной для платных клиентов и через API, эта опасность значительно уменьшилась, но все же она присутствует.
Можно предположить, как даже очень редкие ошибки могут иметь драматические последствия, когда речь заходит о разрешении клинических случаев. Однако в рамках общей учебной программы с множеством источников достоверной информации эта проблема становиться не столь важной (с учетом, что над ней работают).
Озабоченность по поводу честности экзаменов и влияния ChatGPT на учебный план подтолкнули администрацию Медицинской школы Стэнфорда перейти от экзаменов с открытой книгой к экзаменам с закрытой книгой, чтобы обеспечить развитие у студентов навыков клинического мышления без опоры на ИИ. Кроме того, они создали рабочую группу по ИИ для изучения возможностей интеграции инструментов ИИ в медицинское образование.
