ТехноСводка

ИИ

JetBrains выпустила открытую модель Mellum2.1 под лицензией Apache 2.0

JetBrains представила 8 октября языковую модель Mellum2.1 на архитектуре mixture-of-experts: 12 млрд параметров, из которых активны 2,5 млрд.

Mellum2.1 развивает версию Mellum2, вышедшую в июне. Структуру сети разработчики сохранили, поэтому основные изменения затронули постобучение, основой которого стало обучение с подкреплением. Для него JetBrains создала собственную инфраструктуру, позволившую запустить миллионы изолированных сред. Набор задач расширили математикой, спортивным программированием, естественными науками, работой с инструментами и программной инженерией, а из данных удалили непроверяемые ответы, неработающие тесты и слишком простые или невыполнимые задания.

Модель рассчитана на работу в составе кодинг-агентов и автономных систем: она ориентируется в репозитории, редактирует файлы, тестирует правки и ищет причины падения автотестов. Её можно использовать и как универсального ассистента. Локальный запуск позволяет держать код и данные под контролем.

По сравнению с Mellum2, Qwen3.5-9B и Gemma 4 E4B наибольший прогресс зафиксирован в агентном программировании, также выросли показатели в математике, вызове функций и общих вопросах. Благодаря multi-token prediction скорость на одиночных запросах выросла примерно в 1,6 раза, а при высокой параллельной нагрузке модель обрабатывает почти вдвое больше токенов, чем Qwen3.5-9B.

Модель опубликована на Hugging Face. Готовятся версии GGUF для llama.cpp, Ollama и LM Studio, а также модуль предсказания токенов для спекулятивного декодирования в vLLM.

  • MoE: 12 млрд параметров, 2,5 млрд активных
  • Скорость на одиночных запросах выросла примерно в 1,6 раза
  • Лицензия Apache 2.0, веса на Hugging Face

Источники

Текст подготовлен автоматически по материалам источников и может содержать неточности.