Врачи проанализировали медицинские советы коллег и ChatGPT. Искусственный интеллект победил

Некоторые врачи могут быть не очень отзывчивыми, и для многих людей это проблема. В то же время работы наоборот становятся все более человечными. Такой парадокс подтолкнул ученых из Калифорнийского университета проверить, может ли искусственный интеллект заменить врача, по крайней мере, частично. Со ссылкой на Sci­ence Alert рассказываем, что из этого вышло.

В ходе исследования ученые исследовали эмпатию врачей и чат-бота с искусственным интеллектом Chat­G­PT. Так, они задали людям и машине 195 медицинских вопросов.

Исследователи собрали вопросы, опубликованные в общедоступном сабреддите под названием AskDocs. Например, один человек спросил, насколько опасно проглотить зубочистку. Другой спросил, получит ли он сотрясение мозга после удара головой о металлический брусок.

Медицинский работник, чьи учетные данные были проверены модератором, ответил на вопросы. Исследователи также задали аналогичные вопросы Chat­G­PT.

Затем группу врачей спросили, чей ответ лучше – чат-бота или врача, но комиссия не знала, какой из групп принадлежали ответы.

В 79% случаев судьи предпочли ответы чат-бота, которые содержали более качественную информацию и более отзывчивый тон, чем ответы врачей.

По сравнению с ответами врачей, примерно в 4 раза больше ответов чат-бота попало в лучшие, и примерно в 10 раз больше ответов ИИ получило самые высокие оценки по эмпатии.

Ответы чат-бота также были примерно в 4 раза длиннее, чем те, которые предоставили врачи, в среднем 211 слов в сообщении по сравнению с 52 словами врача.

Вот пример ответа врача и чат-бота на один вопрос на AskDocs:

Вопрос: Каков риск смерти после проглатывания зубочистки?

Врач ответил: «Если прошло 2–6 часов, скорее всего она попала в ваш кишечник. Это означает, что ее нельзя легко вытащить. Многие могут без проблем глотать бритвенные лезвия и зубочистки, это вряд ли навредит. Но если у вас начинает болеть желудок, то не медлите, обратитесь в отделение неотложной помощи и не забудьте указать о зубочистке».

Ответ Chat­G­PT был таким: «Естественно волноваться, если вы проглотили посторонний предмет, но в этом случае очень маловероятно, что проглоченная зубочистка нанесет вам серьезный вред. Зубочистки изготовлены из древесины, которая не является токсичной, и не приведет к отравлению. Однако зубочистка может привести к травмам, если она застрянет в горле или проколет пищевод. Однако это вряд ли произойдет с тупой, обработанной зубочисткой, толщиной всего несколько сантиметров. Если вы чувствуете какой-либо дискомфорт или такие симптомы, как боль в животе, затрудненное глотание или рвота, важно связаться с медицинским работником для дальнейшего обследования. Однако если вы не чувствуете никаких симптомов, можно с уверенностью предположить, что зубочистка прошла через вашу пищеварительную систему, и вам не нужно волноваться. Всегда следует быть осторожным во время еды и удалять из нее любые посторонние предметы. Понятно, что вы можете чувствовать себя параноиком, но старайтесь не слишком переживать. Очень маловероятно, что зубочистка нанесет вам серьезный вред».

Исследование показывает, что чат-боты могут лучше создавать впечатление заботы, чем занятый врач, добровольно отвечающий на вопросы онлайн.

Полезен ли такой инструмент в клинической практике или нет, еще предстоит выяснить. Исследователи пишут, что онлайн-форумы могут не отражать типичное взаимодействие между пациентом и врачом, где уже существуют отношения и больше персонализации.

И хотя Chat­G­PT предоставит вежливый, понятный ответ, который на первый взгляд кажется связным, он допускает базовые ошибки в кодировании и математике, а многие «факты», которые он предоставляет, являются вымышленными или неправильными.

Однако врачи завалены сообщениями пациентов, поскольку пандемия популяризировала телемедицину, поэтому существует потребность в инструментах, которые повышают производительность и улучшают обслуживание. К примеру, чат-бот может составлять ответы на вопросы пациентов, которые потом может редактировать врач.

«Это исследование должно побуждать к внедрению ИИ-помощников для обмена сообщениями», – пишут исследователи. «Если ответы на вопросы большего количества пациентов будут предоставляться быстро, с сочувствием и в соответствии с высокими стандартами, это может уменьшить ненужные визиты в клинику, освободив ресурсы для нуждающихся».

Учитывая склонность чат-ботов к «галлюцинациям» и сочинению фактов, «было бы опасно полагаться на любую фактическую информацию, предоставленную таким ответом чат-бота», – говорит профессор из Университета Лидса в Великобритании Энтони Кон. «Важно, чтобы любые ответы тщательно проверялись медицинским работником».

• Идея использовать ИИ в медицине не нова, здесь мы рассказывали, как ИИ помогает врачу в работе.