Медицинские ИИ-чат-боты оказались специалистами по вредным советам

Далеко не у всех людей есть возможность посетить врача или больницу, поэтому появление медицинских чат-ботов дало надежду на простой и постоянный доступ для получения квалифицированной медицинской консультации. Наверняка такое станет возможным в будущем, но пока изучение вопроса показало, что медицинские чат-боты скорее запутают пациента, чем помогут решить ему проблему со здоровьем.

О неудовлетворительном состоянии дел с медицинской квалификацией искусственного интеллекта сообщила группа учёных из исследовательского центра Oxford Internet Institute при Оксфордском университете в Великобритании. Для этого они предоставили 1300 добровольцам сценарии различных заболеваний (симптоматику), подготовленные профессиональными врачами, и предложили самостоятельно найти ответы в интернете, включая общение с медицинскими чат-ботами.

«Исследование выявило нарушение двусторонней связи, — рассказали авторы работы. — Те, кто использовал [чат-ботов], принимали решения не лучше, чем участники, которые полагались на традиционные методы, такие как онлайн-поиск или собственное суждение».

Пользователи использовали личные навыки, справочную информацию и консультацию с медицинскими большими языковыми моделями, такими как ChatGPT, GPT-4o, а также Command R+ от Cohere и Llama 3 от Meta✴. Последующий анализ показал, что общение с чат-ботами снизило вероятность правильной диагностики и вело к недооценке серьёзности состояния здоровья.

Учёные отмечают, что участники эксперимента часто опускали ключевые детали при обращении к чат-ботам или получали ответы, которые было трудно интерпретировать. В нынешнем виде, отмечают исследователи, медицинский ИИ из свободных источников использовать не просто не нужно, но и часто вредно.

Не следует заниматься самолечением, а диагностика с помощью чат-ботов — это самолечение в чистом виде. При обнаружении проблем со здоровьем следует обращаться к специалисту-человеку. И если когда-нибудь медицинских чат-ботов допустят к постановке настоящих медицинских диагнозов, то это будет сделано только после клинических испытаний, как сегодня это происходит с принятием новых лекарств.