Модель на 75 млн параметров набрала 44% на ARC-AGI-1 за 67 центов

Разработчик Митхил Вакде с нуля обучил трансформер с 75 млн параметров, который набрал 44% на бенчмарке ARC-AGI-1. Обучение заняло 1,5 часа на одной видеокарте RTX 5090 и обошлось в 67 центов.
Исследователь Митхил Вакде (Mithil Vacde) представил результаты эксперимента по обучению трансформера с нуля. Его модель на 75 млн параметров набрала 44% на публичном тесте ARC-AGI-1 — бенчмарке, который используется для оценки способности ИИ решать новые задачи.
Обучение заняло 1,5 часа на одной видеокарте NVIDIA RTX 5090. Стоимость вычислений, по расчётам автора, составила 67 центов. Код модели опубликован в открытом доступе.
Что важно понимать про результат
Показатель в 44% — это результат на публичном тесте. Для сравнения, задачи из приватной части ARC-AGI-1 традиционно считаются более сложными: многие модели показывают на них значительно более низкие результаты, чем на публичной выборке. Сам Вакде не раскрыл, как результаты его модели выглядят на приватном наборе задач.
Успех модели на публичной части может частично объясняться тем, что отдельные задачи этой выборки уже встречались в открытых данных и могли попасть в обучающий набор. Это ограничение не позволяет напрямую сравнивать результат с системами, которые тестируются на невидимых задачах.
Что даёт пример ARC-AGI
Пример Вакде показывает, что задача поиска закономерностей в ограниченном наборе примеров не обязательно требует гигантских вычислительных мощностей. Для обучения модели потребовалось электричество и аренда GPU на сумму около 67 центов — при условии доступа к современному оборудованию.
Однако из этого не следует, что ARC-AGI-1 стал проще. Бенчмарк остаётся сложным для большинства моделей. Результат демонстрирует скорее чувствительность отдельной части теста к техникам обучения на синтетических данных, чем прорыв в общем искусственном интеллекте.
Tproger · права на исходный материал принадлежат автору.
Материал носит информационный характер и не является индивидуальной инвестиционной рекомендацией. Операции с криптовалютами связаны с риском полной потери вложенных средств. Подробнее — «Отказ от ответственности».
Разборы событий, итоги дня и то, что двигает рынок. Без сигналов и обещаний — только факты и что они значат.
Читать в Telegram →По теме
- ▪Microsoft сделает Copilot средством диагностики неполадок Windows3DNews · 18 ноября
- ▪Google открыла бесплатный доступ к ИИ-агенту Gemini Tasks в шести странахiXBT · 18 ноября
- ▪OpenAI выпустила GPT-6.2 Astra и Sol: Astra в API подешевела на 20%Tproger · 17 ноября
- ▪Сбер оценил выручку ОМК в 2,569 трлн рублей до 2036 годаiXBT · 17 ноября