Дерматолог Линч проверил GPT-6 Astra и Claude на 200 образованиях кожи: CNN 2015 года точнее

Дерматолог Магнус Линч дал GPT-6 Astra, Claude Fable 5.1 и дообученной Inception v3 2015 года по 200 кожных образований с подтверждённым биопсией диагнозом. Свёрточная сеть поставила верный диагноз в 125 случаях из 200 (62%), языковые модели — в 84 и 85 (42%). Меланому на ухе обе LLM приняли за безобидный себорейный кератоз и предложили отпустить пациента.
Дерматолог Магнус Линч отобрал 200 кожных образований с диагнозом, подтверждённым биопсией, и показал их трём системам: GPT-6 Astra, Claude Fable 5.1 и свёрточной нейросети Inception v3, дообученной в 2015 году. Выбор нужно было сделать из шести вариантов. Сеть справилась в 125 случаях, языковые модели — в 84 и 85.
Разрыв в 20 процентных пунктов Линч объясняет тем, что свёрточная сеть обучена именно на изображениях кожи, а LLM работают с картинкой иначе. Дата публикации разбора не названа, полная методика — в переводе на Хабре.
Хабр ИИ · права на исходный материал принадлежат автору.
Материал носит информационный характер и не является индивидуальной инвестиционной рекомендацией. Операции с криптовалютами связаны с риском полной потери вложенных средств. Подробнее — «Отказ от ответственности».
Разборы событий, итоги дня и то, что двигает рынок. Без сигналов и обещаний — только факты и что они значат.
Читать в Telegram →По теме
- ▪Nvidia обсуждает лицензию $2000 в год за один GPU для запуска ИИ-агентовiXBT · 25 октября
- ▪Минцифры утвердило рекомендации по защите дата-центров от беспилотниковiXBT · 25 октября
- ▪РАН представил проект плана: квантовый компьютер на 300 кубитов к 2030 годуiXBT · 25 октября
- ▪Nvidia и PreussenElektra изучат конверсию закрытых АЭС в дата-центры для ИИiXBT · 25 октября