BTC $62 468 -1.9%ETH $1 742 -2.0%SOL $73 +0.8%TON $1,01 -5.0%BTC $62 468 -1.9%ETH $1 742 -2.0%SOL $73 +0.8%TON $1,01 -5.0%
ии3DNews

Reflection представила открытую ИИ-модель Beam на 501 млрд параметров

Reflection представила открытую ИИ-модель Beam на 501 млрд параметров

Американский стартап Reflection выпустил свою первую модель с открытыми весами — Beam. Она построена на архитектуре Mixture-of-Experts: 501 млрд общих и 23 млрд активных параметров, обучение — на 23,8 трлн текстовых токенов. Разработчик утверждает, что модель не уступает ведущим китайским открытым моделям в тестах на логические рассуждения, но обходится дешевле. Исходный код и веса обещают открыть под лицензией Apache 2.0 в течение текущего месяца.

Американский стартап Reflection представил Beam — свою первую передовую модель искусственного интеллекта с открытыми весами. Компания основана два года назад.

Модель спроектирована на базе архитектуры Mixture-of-Experts: 501 млрд общих и 23 млрд активных параметров. Инженеры обучили её на массиве из 23,8 трлн текстовых токенов и задействовали крупные вычислительные мощности для подкрепляемого обучения. На финальных тестах Beam показала производительность на уровне флагманской модели GLM 5.2, но, по данным разработчика, затратила на генерацию ответов в 3–4 раза меньше вычислительных ресурсов.

Разработчик заявляет, что Beam не уступает ведущим китайским открытым моделям в тестах на сложные логические рассуждения, но обходится значительно дешевле. По утверждению Reflection, это может обострить конкуренцию в создании западного аналога китайских моделей.

Главной особенностью архитектуры стал встроенный регулятор длины рассуждений, который позволяет пользователям настраивать баланс между скоростью работы и качеством вычислений. При низких значениях параметра модель выдаёт лаконичные ответы, при высоких — запускает многоступенчатый анализ для поиска скрытых ошибок в коде. Представители компании откроют исходный код и веса модели под свободной лицензией Apache 2.0 в течение текущего месяца.

Источник

3DNews · права на исходный материал принадлежат автору.

Материал носит информационный характер и не является индивидуальной инвестиционной рекомендацией. Операции с криптовалютами связаны с риском полной потери вложенных средств. Подробнее — «Отказ от ответственности».

Bittalk в Telegram

Разборы событий, итоги дня и то, что двигает рынок. Без сигналов и обещаний — только факты и что они значат.

Читать в Telegram →

По теме