Superfluid 0.1.2: один локальный сервер для нескольких ИИ-программ
На странице · 3 разделов
Superfluid 0.1.2 распределяет запросы нескольких ИИ-программ к локальной модели и хранит состояние сеансов. Для одного чата он не нужен. Это ранняя версия: перед установкой проверьте совместимость с llama.cpp и MLX, а межмашинный канал не считайте защищённым.
Superfluid 0.1.2: один локальный сервер для нескольких ИИ-программ
Если на одном компьютере одновременно работают чат и несколько ИИ-агентов, они могут ждать ответа одной и той же модели по очереди. Base Compute выпустила 8 октября 2026 года стабильный релиз Superfluid 0.1.2 — программу, которая распределяет запросы к локальной модели и сохраняет состояние сеансов. Для одного обычного чата менять привычную программу запуска модели не требуется; это новость прежде всего для тех, кто уже запускает несколько клиентов параллельно. s1 s2
Версия и проверка источников: 0.1.2; 15 октября 2026 года. Редакция не запускала Superfluid и не измеряла его скорость.
Что меняется при локальном запуске
Superfluid ставит общий сервер перед программами, которые непосредственно запускают модель: llama.cpp для файлов GGUF, MLX на Mac с Apple Silicon и отдельным движком baseRT. Клиенты могут обращаться к локальному адресу через совместимые интерфейсы OpenAI, Anthropic или Ollama. Здесь «интерфейс» означает способ отправить запрос программе, а не облачный вызов: при настройке на 127.0.0.1 запрос направляется на собственный компьютер. Сам Superfluid не включает веса моделей и при первом использовании загружает нужную программу запуска и выбранную модель; подготовка требует сети. s2 s3
Разработчики заявляют две полезные функции: короткий запрос чата получает приоритет перед фоновой работой агентов, а незавершённый сеанс можно продолжить после перезапуска рабочего процесса. В опубликованных авторских испытаниях на Mac с Apple M5 Pro и моделью Qwen3-4B время до первого слова ответа чата за восемью агентами составило 0,79 секунды для Superfluid и 64–120 секунд для некоторых сравниваемых серверов. Это замеры Base Compute для указанного сценария, не независимый тест и не обещание такой скорости на другом компьютере. Отдельные замеры общей скорости выполнялись на другом Mac с M1 Max; смешивать эти наборы нельзя. s2 s4
Стоит ли устанавливать сейчас
Если вы просто беседуете с одной моделью, дополнительный сервер усложнит схему без доказанной пользы для вашего случая. Если несколько локальных программ одновременно обращаются к модели, имеет смысл изучить документацию проекта и проверить поведение на собственных запросах. Это ранняя версия до 1.0: разработчики предупреждают, что параметры и формат данных могут измениться. Установочные пакеты 0.1.2 доступны для macOS на Apple Silicon и Linux x86-64/arm64; для других платформ документация предлагает сборку из исходников. Это новость, а не проверенный Modelium рецепт установки. s1 s2 s3
Есть и актуальный риск совместимости: открытые 15 октября запросы на исправление описывают изменение структуры llama.cpp в сборке b11642 и изменение формата временных данных в mlx-lm 0.32.0, с которыми адаптеры Superfluid ещё согласуют работу. Эти сообщения разработчиков не доказывают, что любая установка 0.1.2 непременно сломается, но перед переходом стоит проверить версию загружаемого движка и дождаться подтверждённого исправления, если ваша конфигурация затронута. s7 s8
Где проходят границы приватности и лицензии
Локальный сервер по умолчанию слушает только собственный компьютер, но при выборе модели из Hugging Face скачивание идёт через интернет. Запросы и ответы сохраняются в журнале сеансов открытым текстом на диске пользователя. Не открывайте сервер в сеть без отдельной настройки доступа. Описания соединения двух машин противоречивы: README называет связь зашифрованной, а раздел безопасности той же версии прямо говорит об открытом TCP-трафике между узлами. До разъяснения считайте такой канал незащищённым и не передавайте через него личные данные. s2 s5
Код Superfluid распространяется под Apache-2.0, но это не лицензия для автоматически скачиваемых весов, llama.cpp, MLX или движка baseRT: их права нужно проверять отдельно. В NOTICE проекта прямо указано, что движок baseRT не входит в этот репозиторий и имеет собственные условия. s2 s6
Следующий шаг: откройте документацию Superfluid 0.1.2 и сначала сопоставьте свою ОС, модель и программу запуска с матрицей установки; не переносите авторские цифры скорости на своё железо без собственного измерения. s3 s4
Источники
- Base Compute: Superfluid v0.1.2 release. Получено 15.10.2026.
- Superfluid 0.1.2 README. Получено 15.10.2026.
- Superfluid 0.1.2 installation. Получено 15.10.2026.
- Superfluid 0.1.2 benchmarks. Получено 15.10.2026.
- Superfluid 0.1.2 security. Получено 15.10.2026.
- Superfluid 0.1.2 LICENSE and NOTICE. Получено 15.10.2026.
- Superfluid PR #17: llama.cpp context compatibility. Получено 15.10.2026.
- Superfluid PR #18: MLX cache compatibility. Получено 15.10.2026.