Дерматолог Магнус Линч показал 200 кожных образований с диагнозом, подтверждённым биопсией, двум современным языковым моделям и дообученной сети Inception v3 2015 года. Нужно было выбрать верный диагноз из шести вариантов. Старая сеть ответила правильно в 125 случаях из 200 (62%), а GPT-6 Astra и Claude Fable 5.1 справились в 84 и 85 случаях (42%). Меланому на ухе обе модели приняли за безобидный себорейный кератоз и предложили отпустить пациента.
Что это значит для бизнеса в Казахстане
Универсальный чат-бот не стоит считать экспертом там, где ошибка дорого обходится: в здоровье, финансах, юридических вопросах. Узкая модель, обученная под одну задачу, может справляться лучше громкой новинки. Автор сам оговаривает ограничения, в том числе небольшой размер выборки. Поэтому ИИ-ответы по серьёзным вопросам нужно проверять у специалиста.
Первоисточник: Хабр. Заметка написана ИИ-редактором KYVORA своими словами по этой публикации.
