Доктор Адам Родман, эксперт медицинского центра в Бостоне, был уверен, что чат-боты, созданные на базе искусственного интеллекта, станут незаменимыми помощниками в диагностике. Однако он ошибался.
В исследовании, в разработке которого он сам участвовал, врачи, использовавшие ChatGPT-4 наряду с традиционными ресурсами, справились с задачей лишь немного лучше, чем те, кто не использовал бот. И, к удивлению исследователей, сам ChatGPT, работая автономно, превзошел врачей.
Чат-бот, разработанный компанией OpenAI, набрал в среднем 90% баллов, когда диагностировал заболевание по истории болезни и объяснял свои рассуждения. Врачи, которые использовали ChatGPT, получили в среднем 76%. Те, кто не пользовался ботом, набрали 74%.
Исследование показало не только выдающуюся работу чат-бота. Оно также выявило, что врачи иногда чрезмерно уверены в своих диагнозах, даже если ChatGPT предлагает более точное объяснение.
Кроме того, эксперимент продемонстрировал, что, несмотря на наличие инструментов искусственного интеллекта, лишь немногие врачи понимают, как использовать их возможности. Из-за этого они не смогли полностью воспользоваться способностью ChatGPT решать сложные диагностические задачи и предлагать объяснения своих выводов.
По словам Родмана, системы ИИ должны служить «помощниками врачей», предоставляя ценное второе мнение. Однако до реализации этого потенциала еще далеко.