Oossa

llama.cpp b12088: поддержка NVFP4 LFM3 и новые сборки

Вышли обновлённые сборки открытой LLM-среды для macOS, iOS и нескольких конфигураций Ubuntu, а также добавлен формат модели NVFP4 LFM3.

ЗаметкаАвтор: Опубликовано Oossa: 1 мин чтения

ggml-org выпустила llama.cpp версии b12088. В обновлении появилась поддержка формата модели NVFP4 LFM3, а также готовые сборки для Apple Silicon, Intel Mac, iOS и нескольких конфигураций Ubuntu — в том числе только для CPU и с Vulkan. Сборка для Apple Silicon с KleidiAI указана в списке, но пока отключена. Все файлы доступны на странице релиза на GitHub.

Почему это важно

Теперь разработчики могут запускать llama.cpp с новым форматом модели и использовать готовые сборки для большего числа платформ, экономя время на настройке.

Эта статья была полезной?
Поделиться

Читайте также

Oossa · Рассылка

Неделя ИИ — простыми словами

Каждый понедельник: главное за неделю понятным языком. Бесплатно, без спама.