# Limite 1B Violetto: математическая модель с открытыми весами и запуском через vLLM

Источник: https://modelium.tech/zhurnal/limite-1b-violetto-local-math-model/

Paradigma выпустила Limite 1B Violetto — специализированную математическую модель примерно на 1,04 млрд параметров. Веса доступны под Apache-2.0, а официальный плагин запускает модель локально через vLLM 0.26.0 на Linux x86-64 с NVIDIA и CUDA 13. Прямой запуск через Transformers пока не готов.

Paradigma опубликовала **Limite 1B Violetto** — плотную авторегрессионную модель для решения математических задач. В закреплённой ревизии Hugging Face лежит один файл `model.safetensors` размером 2 070 811 520 байт; конфигурация описывает 48 слоёв, hidden size 1280 и контекст до 131 072 токенов. Размер файла не следует считать требованием к RAM или VRAM: минимальную аппаратную конфигурацию разработчик не приводит. [s1](#src-s1) [s2](#src-s2)

## Что выпустили

Violetto — не дообучение известной базовой модели, а собственная архитектура Paradigma, обученная с нуля менее чем на 300 млрд отобранных токенов, а затем прошедшая SFT- и RL-этапы. По данным Safetensors в репозитории хранится около **1,035 млрд параметров** в BF16. Веса и tokenizer доступны без gating. [s1](#src-s1) [s2](#src-s2)

Модель узко специализирована: она рассчитана прежде всего на одиночные математические задачи. Авторы намеренно оставили слабую общую instruction-настройку. Карточка предупреждает, что Violetto может потерять исходный контекст и переосмыслить нематематический запрос как математический. Шаблон чата принимает только текст, запрещает tools и function calls и использует фиксированный системный промпт для пошагового решения. [s1](#src-s1)

## Как запустить локально

Официальный путь работает через отдельный плагин для **vLLM 0.26.0**. Разработчики зафиксировали Python 3.12, PyTorch 2.11.0 с CUDA 13.0 и Transformers 5.6.2. Поддерживаемая конфигурация — Linux x86-64, NVIDIA GPU и совместимый с CUDA 13 драйвер. Отдельно устанавливать CUDA Toolkit для предложенного окружения не требуется: `uv` использует CUDA-сборку PyTorch из lock-файла. [s3](#src-s3) [s4](#src-s4)

git clone https://github.com/paradigma-inc/limite-violetto.gitcd limite-violettogit checkout cd68d27f100ebb7c84f05603d5af0e8f934b28b5uv sync --lockedVLLM_PLUGINS=limite uv run --locked vllm serve paradigma-inc/limite-1b-violetto

При первом запуске vLLM скачает checkpoint с Hugging Face. В текущей реализации tensor parallel и pipeline parallel должны оставаться равными 1. Плагин регистрирует собственные `LimiteConfig` и `LimiteForCausalLM`; это внешний модуль для vLLM, а не встроенная поддержка архитектуры в стандартном Transformers. [s3](#src-s3)

Рекомендуемые авторами параметры генерации — `temperature=0.6` и `top_p=0.95`. Они записаны в `generation_config.json`, но клиент может переопределить их своими параметрами запроса. [s1](#src-s1) [s3](#src-s3)

## Что с Transformers, Ollama и GGUF

Прямую загрузку Violetto через Hugging Face Transformers разработчики пока только обещают. Официальных GGUF-квантов, рецепта для llama.cpp или модели для Ollama в проверенных источниках нет. Поэтому на момент выпуска воспроизводимый локальный путь фактически привязан к указанному стеку vLLM и NVIDIA/CUDA. [s1](#src-s1) [s3](#src-s3)

Это ограничивает переносимость, но снижает неопределённость установки: версии runtime зафиксированы, плагин опубликован отдельно, а его entry point явно зарегистрирован как `limite_vllm.register:register`. [s4](#src-s4)

## Производительность: только результаты авторов

Paradigma заявляет для Violetto 94,01% на AIME 2026, 83,62% на HMMT February 2026, 50,80% на APEX Shortlist и 74,25% на BeyondAIME. Эти цифры опубликованы самой командой и не являются независимыми тестами Modelium. Авторы также предупреждают, что часть результатов других моделей взята из их карточек или MathArena, а протоколы оценки могут различаться. [s1](#src-s1) [s3](#src-s3) [s5](#src-s5)

Сравнивать модель только по итоговой таблице рискованно: полный технический отчёт и исчерпывающие evaluation-конфигурации пока не опубликованы, происхождение обучающей смеси описано лишь в общих чертах. Практический вывод уже сейчас более узкий: появился компактный специализированный checkpoint с официальным локальным сервером, но не универсальный ассистент и не доказанная замена более крупным математическим моделям.

## Лицензия и практические ограничения

Веса и код vLLM-плагина выпущены под **Apache-2.0**. Лицензия допускает коммерческое использование, модификацию и распространение при соблюдении её условий, включая сохранение лицензии и уведомлений; права на товарные знаки отдельно не предоставляются. [s1](#src-s1) [s6](#src-s6)

Перед внедрением важно учитывать:

- официально документирован только стек NVIDIA/CUDA 13 на Linux x86-64;

- разработчик не указывает минимальный объём VRAM или RAM;

- CPU, Apple Silicon и другие GPU-бэкенды не описаны;

- tensor parallel и pipeline parallel сейчас ограничены значением 1;

- модель текстовая, не поддерживает инструменты и рассчитана на один математический запрос;

- заявленные benchmark-результаты пока не воспроизведены независимо.

Для локальных экспериментов Violetto интересна сочетанием небольшого по меркам современных LLM checkpoint, открытой коммерчески применимой лицензии и официального vLLM-плагина. Для production её стоит оценивать на собственных задачах и собственном оборудовании, не выводя требования к памяти из размера файла весов.

## Источники

1. [Limite 1B Violetto model card](https://huggingface.co/paradigma-inc/limite-1b-violetto/blob/9402e422e87b220507963cd42c997459c1e87b43/README.md) — получено 2026-09-22
2. [Limite 1B Violetto repository tree and file metadata](https://huggingface.co/api/models/paradigma-inc/limite-1b-violetto/tree/9402e422e87b220507963cd42c997459c1e87b43?recursive=true&expand=true) — получено 2026-09-22
3. [Limite Violetto official vLLM plugin README](https://github.com/paradigma-inc/limite-violetto/blob/cd68d27f100ebb7c84f05603d5af0e8f934b28b5/README.md) — получено 2026-09-22
4. [Limite vLLM plugin package configuration](https://github.com/paradigma-inc/limite-violetto/blob/cd68d27f100ebb7c84f05603d5af0e8f934b28b5/pyproject.toml) — получено 2026-09-22
5. [Limite 1B Violetto release blog](https://paradigma.inc/blog/limite-1b-violetto/) — получено 2026-09-22
6. [Limite Violetto serving code license](https://github.com/paradigma-inc/limite-violetto/blob/cd68d27f100ebb7c84f05603d5af0e8f934b28b5/LICENSE) — получено 2026-09-22