Врачи проанализировали медицинские советы коллег и ChatGPT. Искусственный интеллект победил

Некоторые врачи могут быть не очень отзывчивыми, и для многих людей это проблема. В то же время работы наоборот становятся все более человечными. Такой парадокс подтолкнул ученых из Калифорнийского университета проверить, может ли искусственный интеллект заменить врача, по крайней мере, частично. Со ссылкой на Science Alert рассказываем, что из этого вышло.

В ходе исследования ученые исследовали эмпатию врачей и чат-бота с искусственным интеллектом ChatGPT. Так, они задали людям и машине 195 медицинских вопросов.

Исследователи собрали вопросы, опубликованные в общедоступном сабреддите под названием AskDocs. Например, один человек спросил, насколько опасно проглотить зубочистку. Другой спросил, получит ли он сотрясение мозга после удара головой о металлический брусок.

Медицинский работник, чьи учетные данные были проверены модератором, ответил на вопросы. Исследователи также задали аналогичные вопросы ChatGPT.

Затем группу врачей спросили, чей ответ лучше – чат-бота или врача, но комиссия не знала, какой из групп принадлежали ответы.

В 79% случаев судьи предпочли ответы чат-бота, которые содержали более качественную информацию и более отзывчивый тон, чем ответы врачей.

По сравнению с ответами врачей, примерно в 4 раза больше ответов чат-бота попало в лучшие, и примерно в 10 раз больше ответов ИИ получило самые высокие оценки по эмпатии.

Ответы чат-бота также были примерно в 4 раза длиннее, чем те, которые предоставили врачи, в среднем 211 слов в сообщении по сравнению с 52 словами врача.

Вот пример ответа врача и чат-бота на один вопрос на AskDocs:

Вопрос: Каков риск смерти после проглатывания зубочистки?

Врач ответил: «Если прошло 2-6 часов, скорее всего она попала в ваш кишечник. Это означает, что ее нельзя легко вытащить. Многие могут без проблем глотать бритвенные лезвия и зубочистки, это вряд ли навредит. Но если у вас начинает болеть желудок, то не медлите, обратитесь в отделение неотложной помощи и не забудьте указать о зубочистке».

Ответ ChatGPT был таким: «Естественно волноваться, если вы проглотили посторонний предмет, но в этом случае очень маловероятно, что проглоченная зубочистка нанесет вам серьезный вред. Зубочистки изготовлены из древесины, которая не является токсичной, и не приведет к отравлению. Однако зубочистка может привести к травмам, если она застрянет в горле или проколет пищевод. Однако это вряд ли произойдет с тупой, обработанной зубочисткой, толщиной всего несколько сантиметров. Если вы чувствуете какой-либо дискомфорт или такие симптомы, как боль в животе, затрудненное глотание или рвота, важно связаться с медицинским работником для дальнейшего обследования. Однако если вы не чувствуете никаких симптомов, можно с уверенностью предположить, что зубочистка прошла через вашу пищеварительную систему, и вам не нужно волноваться. Всегда следует быть осторожным во время еды и удалять из нее любые посторонние предметы. Понятно, что вы можете чувствовать себя параноиком, но старайтесь не слишком переживать. Очень маловероятно, что зубочистка нанесет вам серьезный вред».

Исследование показывает, что чат-боты могут лучше создавать впечатление заботы, чем занятый врач, добровольно отвечающий на вопросы онлайн.

Полезен ли такой инструмент в клинической практике или нет, еще предстоит выяснить. Исследователи пишут, что онлайн-форумы могут не отражать типичное взаимодействие между пациентом и врачом, где уже существуют отношения и больше персонализации.

И хотя ChatGPT предоставит вежливый, понятный ответ, который на первый взгляд кажется связным, он допускает базовые ошибки в кодировании и математике, а многие «факты», которые он предоставляет, являются вымышленными или неправильными.

Однако врачи завалены сообщениями пациентов, поскольку пандемия популяризировала телемедицину, поэтому существует потребность в инструментах, которые повышают производительность и улучшают обслуживание. К примеру, чат-бот может составлять ответы на вопросы пациентов, которые потом может редактировать врач.

«Это исследование должно побуждать к внедрению ИИ-помощников для обмена сообщениями», – пишут исследователи. «Если ответы на вопросы большего количества пациентов будут предоставляться быстро, с сочувствием и в соответствии с высокими стандартами, это может уменьшить ненужные визиты в клинику, освободив ресурсы для нуждающихся».

Учитывая склонность чат-ботов к «галлюцинациям» и сочинению фактов, «было бы опасно полагаться на любую фактическую информацию, предоставленную таким ответом чат-бота», – говорит профессор из Университета Лидса в Великобритании Энтони Кон. «Важно, чтобы любые ответы тщательно проверялись медицинским работником».

• Идея использовать ИИ в медицине не нова, здесь мы рассказывали, как ИИ помогает врачу в работе.